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ПРЕДИСЛОВИЕ 


Целью предлагаемой работы является аксиоматическое обосно¬ 
вание теории вероятностей. Ведущей мыслью автора было при 
этом естественное включение основ теории вероятностей, считав¬ 
шихся еще недавно совершенно своеобразными, в ряд общих 
понятий современной математики. До возникновения лебеговой 
теории меры и интеграла эта задача была почти безнадежна. После 
исследований Лебега стала ясной аналогия между мерой мно¬ 
жества и вероятностью события, а также между интегралом от 
функции и математическим ожиданием случайной величины. Эта 
аналогия допускает и дальнейшее продолжение: так, например, 
многие свойства независимых случайных величин вполне анало¬ 
гичны соответствующим свойствам ортогональных функций. Для 
того чтобы, исходя из этой аналогии, обосновать теорию вероят¬ 
ностей, следовало еще освободить теорию меры и теорию инте¬ 
грирования от геометрических элементов, которые еще имелись 
у Лебега. Это освобождение было осуществлено Фреше. 

Попытки построения основ теории вероятностей, исходящие 
из этой общей точки зрения, уже имеются, и весь круг идей, 
излагаемых здесь, уже успел приобрести известную популярность 
в узком кругу специалистов; однако отсутствовало полное и 
свободное от излишних усложнений изложение всей системы 
(подготовляется, впрочем, к печати книга Фреше, см. указатель 
литературы, РгёсЬеі [2]). 

Я хотел бы еще указать здесь на те места в дальнейшем 
изложении, которые выходят за пределы упомянутого выше круга 
идей, уже достаточно знакомого в общих чертах специалистам. 
Эти места следующие: распределения вероятностей в бесконечно¬ 
мерных пространствах (глава третья, § 4), диференцирование и 
интегрирование математических ожиданий по параметру (глава 
четвертая, § 5) и особенно теория условных вероятностей и ма¬ 
тематических ожиданий (глава пятая). Следует при этом отметить, 
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что все эти новые понятия и проблемы с необходимостью возни¬ 
кают при рассмотрении вполне конкретных физических задач 1 ). 

Шестая глава содержит обзор отдельных результатов А. Я. 
Хинчина и автора, касающихся условий применимости простого 
и усиленного закона больших чисел. В указателе литературы 
приведены некоторые новые работы, представляющие интерес 
с точки зрения вопросов обоснования теории вероятностей. 

Приношу свою сердечную благодарность А. Я. Хинчину, вни¬ 
мательно прочитавшему всю рукопись и предложившему 'целый 
ряд улучшений. 

Клязьма близ Москвы, 1 мая 1933 г. 

А. Колмогоров 


) Ср., например, цитированную в сноске *) к стр. 55 работу 
М. А. Леонтовича и автора, а также М. ІеопіотівсН, 2иг ЗЫізіік бег 
копііпціегІісЬеп Зузіеше ипб без геіШсНеп ѴегІаиГез бег рІіузікаІізсЬем 
Уог^ап^е, „РЬузік. 2еіізсЬг. б. 5о\ѵіе1ипіоп а , т. 3, 1933, стр. 35 — 63. 
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I. ЭЛЕМЕНТАРНАЯ ТЕОРИЯ ВЕРОЯТНОСТЕЙ 

Мы называем элементарной теорией вероятностей ту часть 
теории вероятностей, в которой приходится иметь дело с ве¬ 
роятностями лишь конечного числа событий. Теоремы, которые 
здесь выводятся, естественно применяются также и к вопросам, 
связанным с бесконечным числом случайных событий, однако 
при изучении этих последних применяются также существенно 
новые принципы. Поэтому единственная аксиома математической 
теории вероятностей, относящаяся именно к случаю бесконечного 
числа случайных событий, вводится лишь в начале второй главы 
(аксиома VI). 

Теория вероятностей как математическая дисциплина может и 
должна быть аксиоматизирована совершенно в том же смысле, 
как геометрия или алгебра. Это означает, что, после того как 
даны названия изучаемым объектам и их основным отношениям, 
а также аксиомы, которым эти отношения должны подчиняться, 
все дальнейшее изложение должно основываться исключительно 
лишь на этих аксиомах, не опираясь на обычное конкретное 
значение этих объектов и их отношений. 

Соответственно этому в § 1 определяется понятие поля ве¬ 
роятностей как системы множеств, удовлетворяющей известным 
условиям. Что представляют собой элементы этих множеств, 
совершенно безразлично для чисто математического развития 
теории вероятностей (ср. введение основных геометрических 
понятий в „Основах геометрии" Гильберта, или определение 
групп, колец и тел в абстрактной алгебре). . 

Всякая аксиоматическая (абстрактная) теория допускает, как 
известно, бесконечное число конкретных интерпретаций. Таким 
образом и математическая теория вероятностей допускает наряду 
с теми интерпретациями, из которых она возникла, также много 
других. Так мы приходим к приложениям математической теории 
вероятностей к таким областям науки, которые не имеют отно¬ 
шения к понятиям^ случая и вероятности в собственном смысле 
этого слова. 

Аксиоматизация основ теории вероятностей может быть про¬ 
ведена разли чными способами как в отношении выбора аксиом, 
так и выбора основных понятий и основных соотношений. Если 
преследовать возможной простоты как самой системы 

аксиом, так и построения из нее дальнейшей теории, то пред- 
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“ ТСЯ наи й более Целесообразным аксиоматизирование понятий 

Г " еГ0 Существуют также™;; 

ие системы обоснования теории вероятностей а именно такие 

в которых понятие вероятности не относится к числу основных 

стремятся 3 СЗМ0 Выражается че Р ез ЦРУ™е понятия >) При этом 
стремятся, однако, к другой цели, а именно по возможности 

к наиболее тесному смыканию математической теории с эмпипи- 
ческим возникновением понятия вероятности. Р 

§ 1. Аксиомы 2 ) 

наз П ьш?ть Е я7.Г 0ЖеСТВ0 Элементов V, С,-.., которые мы будем 
мноТеств и Тр аРНЫМи Событиями > а множество под- 

^ "ЛІГ еМеНТЫ МН0ЖеСТВа ® будем назы вать случай. 

I. ^ является телом множеств 3 ). 

II. <5 содержит множество Е. 

гг }}]- * аждом У множеству А из % поставлено в соответ- 
ствие неотрицательное действительное число Р (А) Это число 
называется вероятностью события А ( ’ 

IV. Р(Я)= 1. 

V. Если А и В не пересекаются, то 

Р(А + В) = Р(А) + Р(В). 

Система множеств ^ вместе с поставленными к ней в оппе- 

мам Т-Ѵ С н ° я ° ч ТВетствие числа «и Р (А), удовлетворяющая аксио¬ 
мам I V, называется полем вероятностей. 

Наша система аксиом I—V непротиворечива. Это показывает 

2“ Пример: Е С0СТ0ИТ И3 единственн °го элемента І из 
Ей нулевого множества 0, при этом положено Р(Е)=1 РѴ(П=0 

аша система аксиом, однако, не является полной • ’в разных 
вероятностей РИИ Вер ° ЯТН ° СТеЙ Рассматриваются различный поля 

Э Ср„ например, В. ѵ . Мівез [1] и [2] и С. Н. Бернштейн ГЛ 

»кг ж: 

большими латинскими буквами. ® буД6М “ ДаЛЫіейшем обозначать 


ОТНОШЕНИЕ К ДАННЫМ ОПЫТА 
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Построение поля вероятностей. Простейшие поля вероят¬ 
ностей строятся следующим образом. Берутся произволь¬ 
ное конечное множество Е = { 4, | 2 ,..., Ё к } и произвольное 

множество [Р ъ Р 2 , Р к } неотрицательных чисел с суммою 
Рі + + • • • + Р к = 1. За ^ принимается совокупность всех 

подмножеств из Е , и полагается Р { Ё. , Ё. ,..., 1 = Р. 4- 

1 и 7 га’ 7 іх 1 гі 1 

+ Р І2 + **. + Р іх . В этом случае говорят, что Р ъ Р 2 ,..., Р Л 

суть вероятности элементарных событий Ёъ | 2 ,..., 4» или П Р 0СТ0 

элементарные вероятности. Так получаются все возможные 
конечные поля вероятностей, в которых <5 состоит из совокуп¬ 
ности всех подмножеств из Е (при этом поле вероятностей на¬ 
зывают конечным, если множество Е конечно). По поводу даль¬ 
нейших примеров ср. вторую главу, § 3. 

§ 2. Отношение к данным опыта *) 

Применение теории вероятностей к действительному миру опы¬ 
тов происходит по следующей схеме: 

1. Предполагается данным некоторый комплекс Ѳ условий, 
допускающий неограниченное число повторений. 

2. Изучают определенный круг событий, которые могут насту¬ 
пить в результате осуществления условий Ѳ. В отдельных слу¬ 
чаях реализации условий Ѳ упомянутые события протекают, 
вообще говоря, различным образом. Пусть Е — множество раз¬ 
личных возможных вариантов Ёі, | 2 ,. . .исхода указанных собы¬ 
тий. Некоторые из этих вариантов могут при этом вообще 
не реализоваться. Мы включаем во множество Е все варианты, 
которые мы а ргіогі рассматриваем как возможные. 

3. Если после реализации условий Ѳ осуществившийся на 
практике вариант нашего события окажется принадлежащим 
к (определенному какими-либо условиями) множеству А , то мы 
говорим, что наступило событие А 

Пример. Комплекс условий В> заключается в том, что бросают два 
раза монету. Круг событий, о котором шла речь в п. 2, состоит в том, 
что при каждом бросании могут появиться решетка или герб. Отсюда 


*) Читатель, который интересуется лишь чисто математическим раз¬ 
витием теории, может этот параграф не читать — дальнейшее изложе¬ 
ние основывается на аксиомах § 1 и не использует рассуждений этого 
парагріфз. В нем мы ограничимся лишь простым указанием на эмпи¬ 
рическое возникновение аксиом теории вероятностей и сознательно 
оставляем поэтому в стороне глубокие философские изыскания о поня¬ 
тии вероятности в мире опытов. В изложении необходимых предпосылок 
для приложимости теории вероятностей к миру действительных со¬ 
бытий автоо в значительной мере следует выводам Мизеса, в частности 
ср. Н. ѵ. Мізез [1], стр. 21—27, параграф „Оаз ѴегЬаІІпіз бег ТЬеогіе 
гиг Егіа1ігип88\уе1і*. 
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следует, что всего возможно четыре различных варианта (элементарных 
события), именно: решетка — решетка, решетка — герб, герб — решетка, 
герб —герб. В качестве события А рассматривается „повторение". Это 
событие состоит из соединения первого и четвертого элементарных 
событий. Таким образом можно каждое событие рассматривать как 
множество элементарных событий. 

4. При известных условиях, в которые мы здесь не будем 
глубже вдаваться, можно предположить, что некоторым собы¬ 
тиям А, которые могут наступить или же не наступить после 
осуществления условий Ѳ, поставлены в соответствие опреде¬ 
ленные действительные числа р (Л), которые обладают следую¬ 
щими свойствами: 

A. Можно практически быть уверенным, что, если комплекс 
условий © будет повторен большое число п раз и если при 
этом через т обозначено число случаев, при которых событие А 

наступило, то отношение будет очень мало отличаться от Р (Л). 

B. Если Р (Л) очень мало, то можно практически быть уве¬ 
ренным, что при однократной реализации условий © событие А 
не будет иметь места. 

Эмпирическая дедукция аксиом. Обычно можно предпола¬ 
гать, что система <5 рассматриваемых событий Л, В , С ,..., 
которым приписаны определенные вероятности, образует тело 
множеств, содержащее в качестве элемента множество Е (ак¬ 
сиомы I и II, а также первая часть аксиомы III—существование 

вероятностей). Далее ясно, что так что вторая часть 

аксиомы III оказывается вполне естественной. Для события Е 
всегда т = я, благодаря чему естественно положить Р ( Е ) = 1 
(аксиома IV). Если, наконец, А и В несовместны между собой 
(т. е. множества А и В не пересекаются), то т = т г + Щ, 
где т , т ѵ т 2 обозначают соответственно число опытов, в ко¬ 
торых происходят события Л + В, А и В. Отсюда следуем: 

т __ т 1 , тп 2 
п — п ' п 

Следовательно, является уместным положить Р (Л + В) = 
= Р (Л) + Р (В) (аксиома V). 

П р имечание I. Из практической достоверности двух утверж¬ 
дений следует практическая достоверность утверждения об их одно¬ 
временной правильности, хотя степень достоверности при этом несколько 
понижается. Если, однако, число утверждений очень велико, то из 
практической достоверности каждого отдельного из этих утверждений, 
вообще нельзя вывести никаких заключений относительно одновремен¬ 
ной правильности всех этих утверждений. Поэтому из принципа А ни¬ 
коим образом не следует, что при очень большом числе серий по 

п испытаний в каждой серии отношение — будет мало отличаться 

от Р(Л). 



ТЕРМИНОЛОГИЧЕСКИЕ ЗАМЕЧАНИЯ 



Примечание II. Невозможному событию (пустому множеству) 
соответствует в силу наших аксиом вероятность Р (0) = О *), в то время 
как, наоборот, из Р (А) = О не следует еще невозможность события А; 
согласно принципу В из обращения вероятности в нуль следует только, 
что при однократной реализации условий 0 событие А практически 
невозможно. Это, однако, никоим образом не означает, что при до¬ 
статочно длинном ряде испытаний событие А также не наступит. 
С другой стороны, можно согласно принципу А лишь утверждать, что 

при Р (А) = 0 и очень большом п отношение ~ будет очень мало 

1 

оно может, например, равняться — 

§ 3. Терминологические замечания 

Мы определили объекты нашего дальнейшего изучения — слу¬ 
чайные события — как множества. Многие теоретико-множествен¬ 
ные понятия обозначаются, однако, в теории вероятностей дру¬ 
гими именами. Мы приведем здесь краткий указатель таких понятий. 



В теории множеств 

1. Д и В не пересекаются, 
то-есть АВ = 0. 

2. АВ ... N = 0. 

3. АВ... NтX. 

4. А + В + ...+N= X. 

5. Дополнительное множе¬ 
ство А. 

6. Л = 0. 

7. А = Е. 

8 . Система 21 множеств А ѵ 
Л 2 ,..., А п образует разложе¬ 
ние множества В, если +- 
+ А > + ... + А п =Е. (Это уже 

предполагает, что множества А і 

попарно не пересекаются.) 

9. В является подмножест¬ 
вом А: В с А 


Для случайных событий 

1. События А и В несов¬ 
местны. 

2. События А, В,..., N не¬ 
совместны. 

3. Событие X заключается в 
одновременной реализации всех 
событий Л, В,..., N. 

4. Событие X заключается 
в наступлении по крайней мере 
одного из событий Л, В,. . ., N. 

5. Противоположное собы¬ 
тие Л, состоящее в ненаступле- 
нии события Л. 

6. Л невозможно. 

7. Л должно необходимо на¬ 
ступить. 

8. Испытание 21 заключается 
в том, что устанавливают, какое 
из событий Л], Л 2; ..., А п 

происходит. А ъ Л 2 ,..., А п на¬ 
зываются при этом возможными 
исходами испытания ‘21. 

9. Из осуществления собы¬ 
тия В следует с необходимостью 
осуществление Л. 


Ср. § 4, формула (3). 
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ЭЛЕМЕНТАРНАЯ ТЕОРИЯ ВЕРОЯТНОСТЕЙ 


§ 4. Непосредственные следствия из аксиом, условные 

і, вероятности, теорема Байеса 


Из А + А = Е и аксиом IV и V следует: 

Р(Л) + Р(Л)=1, 

Р (А) = 1 — р (А). 

Так как Е = О, то в частности получаем: 

= 0 . 


( 1 ) 

( 2 ) 




ч (3) 

формула^' В '""' М несовместны , то из аксиомы IV следует 


Р (Л + В + ... + А/) = Р (Л) + Р (В) + ... + р (іѵ) 

(теорема сложения). 

Если Р (Л) > о, то частное 

р (В) — Р(АВ > 

называют условной вероятностью события В при условии А 
Из (5) непосредственно следует: 


( 4 ) 


( 5 ) 


Р {АВ) = Р(Л) Р А (В). 

& Заключение по индукции дает затем общую формулу: 

Р (ИіЛ 2 .. ■ А п ) = 

(теорема умножения ). 

Легко доказываются также следующие формулы: 

Р А (В) > 0, 

Р л( В ) =і , 


Кб) 


( 7 ) 


( 8 ) 

( 9 ) 


( 10 ) 


Р А (В + С) = Р Л (В) + Р Л (С). 

Сравнивая формулы (8) и (10) с аксиомами III—V, получаем 
что система множеств <5 вместе с функцией множеств Р (В) 

(при закрепленном множестве А) образует поле вероятностей, 
следовательно, все доказанные для вероятностей Р (В) общие 
теоремы справедливы для условных вероятностей Р (В) (при 
фиксированном событии А). Легко также заметить, что 

Р А (Л)=1. 


(И) 



содержащую, собственно, теорему Байеса. 

ТЕОРЕМА О ПОЛНОЙ ВЕРОЯТНОСТИ. Пусть А г + Л 2 + ... 
. . . + А п — Е (эго предполагает, что события А ъ А 2 ,..., А п 

несовместны), а^"произвольно. Тогда 

Р(Х)=Р(Л 1 )Р Аі (Х) + 

+ Р(А 2 )Р м (Х)+... + Р (Л п ) р Ап (X). (13) 

Доказательство. 


X = А^Х + А 2 Х + .. • + А п Х; 


согласно (4) получаем: 

Р (X) = Р (А,Х) + Р ( А 2 Х) + ... + Р (А п Х); 

согласно (6) при этом имеет место 

Р (АХ) = Р (А г ) Р А . (X). 

ТЕОРЕМА БАЙЕСА. Пусть А х + А 2 + ... + А п = Е, а X 
произвольно, тогда имеет л^есто: 

Р (Л 4 ) Р а . (X) 

Рі( д г ) -р (Лі) р Лі {Л )+Р (Лі) р Ла (Х ) + .. . + р (Л п ) Р Ап (X) (1 4 > 

(/=1,2,..., п ). 

При этом А и А п часто называют „гипотезами* и 

говорят, что формула (14) дает вероятность Р^(Л.) гипотезы А { 
после наступления события X. [Р(Л^ обозначает при этом 
априорную вероятность А.] 

Доказательство. Согласно формуле (12) имеем: 



Для получения формулы (14) остается только заменить ве¬ 
роятность р(*> ее выражением (13) . по теореме о полной 
вероятности. 
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ЭЛЕМЕНТАРНАЯ ТЕОРИЯ ВЕРОЯТНОСТЕЙ 


§ 5. Независимость 

Понятие о взаимной независимости двух или нескольких 
опытов занимает в известном смысле центральное место в теории 
вероятностей. В самом деле, мы уже видели, что теорию ве¬ 
роятностей с математической точки зрения можно рассматривать 
как специальное применение общей теории аддитивных функций 
множеств. Естественно задать вопрос, каким же образом теория 
вероятностей развилась в большую, обладающую своими собствен¬ 
ными методами самостоятельную науку. 

Для ответа/на этот вопрос следует указать на ту специализа¬ 
цию, которуіб получают в теории вероятностей общие проблемы, 
касающиеся аддитивных функций множеств. 

То обстоятельство, что наша аддитивная функция множеств Р(Л) 
неотрицательна и удовлетворяет условию Р(І2)=1, не обусло¬ 
вливает еще собой возникновения новых глубоких проблем. 
Случайные величины (ср. третью главу) с математической точки 
зрения представляют не что иное, как функции, измеримые по 
отношению к Р(Л), а их математические ожидания являются 
абстрактными интегралами Лебега. [Эта аналогия была впервые 
полностью разъяснена в работах Фреше *).] Введение упо¬ 
мянутых понятий не может, следовательно, еще доставить ника¬ 
кого базиса для развития большой оригинальной теории. 

Исторически независимость испытаний и случайных величин 
явилась тем математическим понятием, которое придало теории 
вероятностей своеобразный отпечаток. Классические работы 
Лапласа, Пуассона, Чебышева, Маркова, Ляпунова, Мизеса и 
Бернштейна действительно посвящены в основном изучению 
рядов независимых случайных величин. Если в новейших иссле¬ 
дованиях (Марков, Бернштейн и др.) часто отказываются от 
предположения полной независимости, то оказываются прину¬ 
жденными для получения достаточно содержательных результатов 
ввести аналогичные ослабленные предположения (ср. в этой 
главе § 6, о цепях Маркова). Мы приходим, следовательно, к тому, 
чтобы в понятии независимости видеть по крайней мере пер¬ 
вый зародыш своеобразной проблематики теории вероятностей 
обстоятельство, которое в этой книге будет мало выделяться, так 
как в ней мы занимаемся, главным образом, только логической 
подготовкой к собственно теоретико-вероятностным исследованиям. 

Соответственно этому одной из важнейших задач философии 
естественных наук, после разъяснения пресловутого вопроса 
о сущности самого понятия вероятности, являются выяснение 
и уточнение тех предпосылок, при которых можно какие-либо 
данные действительные явления рассматривать как независимые. 
Этот вопрос выходит, однако, за пределы нашей книги. 

1 ) Ср. РгёсНеі [1] и [2]. 


НЕЗАВИСИМОСТЬ 
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V* 


п 


Перейдем к определению независимости. 

Пусть даны п испытаний *21 (2) ,..., т. е. п раз 

ложений 

Е = + ... + АР (і — 1, 2,..п) 

основного множества Е. Тогда можно задать г = 
вероятностей 

Рш* ..., п = Р (« ■ . • <п) > 0 

вообще произвольно, при единственном условии 

91» 92»•••» 9п 

Определение I. /2 испытаний 21 (1) , 21 (2) , ..., 51 (п) назы¬ 
ваются взаимно независимыми , если для любых # 2 , ..., 
имеет место равенство: 

р («... <>) = р (<>) р (<>... р «д 


2 


( 2 ) 


Среди г уравнений (2) имеется только г — г г — г 
+ п — 1 независимых 2 ). 

ТЕОРЕМА I. Если п испытаний 51 (1) , $1 (2) ,..., < 21 (п) взаимно 
независимы, то из них любые т (т < п) испытаний 
21 (гг) , ..., < 21 (1т) также независимы 3 ). 

х ) Поле вероятностей с произвольными вероятностями, удовлетворяю¬ 
щими только упомянутым условиям, можно построить следующим обра¬ 
зом: множество Е составляется из г элементов ^ 1Я2 д соответствую¬ 
щие элементарные вероятности пусть будут Р д ^ 2 ^ , и опреде¬ 

ляется как множество всех ^д ід2 .. <дп * для которых 

2 ) В самом деле, в случае независимости можно выбрать произвольно 

только г х + г г -1- \-г п вероятностей р < г) = Р [А^>), притом так чтобы 

соблюдались л условий 

2 № = 

« 

Следовательно, в общем случае имеем г — 1 степеней свободы, а 
в случае независимости только г г -\-г г + ... + г п — п. 

3 ) Для доказательства достаточно показать, что из взаимной незави¬ 
симости п разложений следует взаимная независимость первых п — 1 
из них. Примем, что уравнения (2) удовлетворены. Тогда 

р ■ • • -С?) = 2 р КІЧ? • • ■ <’> - 


Чп 


п 


п 


= Р <>) Р (А %)... Р ^ Р (А%) = 

= Р(А^Р(А%)...Р(А%-у і ). 


2 Колмогоров. Основы теории вероятностей 



ЭЛЕМЕНТАРНАЯ ТЕОРИЯ ВЕРОЯТНОСТЕЙ 
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В случае независимости имеют, следовательно, место равенства: 

Р (А™А™... А^) = Р (А™) Р (А %>)... Р (А^) (3) 

(все і к должна быть при этом различны). 

Определение ІІ.\п событий А ъ А 2 , А п называются 
взаимно независимыми^ ели разложения (испытания) 

Е = А к + А к (/с= 1, 2,..., п) 

являются независимыми. 

В этом случае г г = г 2 =... = г п = 2; г = 2 П , следовательно, 

из 2 П уравнений (2) имеется независимых только 2 П —Н— 1. 
Для независимости событий А 1з А 2і •.., А п необходимы и до¬ 
статочны следующие уравнения *): 

р (АЛ ■ • • А Л - р (А.) р <\) ■ • • р (-у, (4) 

/л = 1,2,..., л, 1 < і, </,<...< / т < п. 

Все эти уравнения независимы между собой . 

В случае п = 2 получаем из (4) только одно (2 2 — 2 — 1 = 1) 
условие для независимости двух событий А х и А 2 : 

Р (А А) = Р (А) Р (А)- (5) 

Система уравнений (2) состоит в этом случае, кроме (5), еще 
из трех уравнений: 

Р (А А) = Р (А) Р (А), 

р (А А) = Р (А) Р (А), 
р (А А) = р (А) Р (А), 

которые, очевидно, следуют из (5) 2 ). 

Следует при этом еще заметить, что из попарной независи¬ 
мости событий А, А» • • •. А> т - е> из соотношений: 

р (А.А.) = Р (А { ) Р (А.) (і ф /), 

1 ) Ср. С. Н. Бернштейн [1],, стр. 47—57. Впрочем, читатель может 
это сам проверить без труда (заключение по индукции). 

а ) Р (АА) = Р (А) — Р (АА) = Р {А,) — Р (А) Р (А) = 

= Р (А) {1 — Р (А)} = Р(А) Р (А) 


и т. д . 




НЕЗАВИСИМОСТЬ 


в случае п > 2 отнюдь не следует независимость этих событий 
[для этого необходимо наличие всех уравнений (4)1. ’ 

При введении понятия независимости мы не пользовались 
условными вероятностями. Нашей целью было при этом воз¬ 
можно яснее изложить чисто математически сущность .этого 
понятия. Его приложения опираются, однако, главным образом 
на свойства некоторых условных вероятностей. Если мы пред¬ 
положим, что все вероятности положительны, то из ѵоанне. 
ний (3) следует, что 

=р (А «ш ) 2 )- (6) 

Из наличия формул (6) следуют обратно, по теореме умноже¬ 
ния [формула (7), § 4] формулы (2). Мы имеем, следовательно 
следующую теорему. 

ТЕОРЕМА II. В случае положительных вероятностей Р(А(Ѵ) 
необходимо и достаточно для независимости испытаний 51^ 
‘ЗІ , следующее условие: условная вероятность исхода 

А я испытания 51* при той гипотезе, что некоторые другие 

.получили определенные „сходы 

> Ацъ 9 • • • ? у равняется абсолютной вероятности Р(А®) 

теорема^ 086 Ф ° РМуЛ ^ доказыва ется аналогично следующая 

ТЕОРЕМА III. Если все вероятности Р (А к ) положительны 
то для взаимной независимости событий А л , А 2 ,..., А необхо¬ 
димо и достаточно наличие уравнений * п 

= Р(Аі) Щ (7) 

для любых попарно различных і ІУ / 2 , . / 


(Аі) 




т 

и 


„ ^ ГЭ доказывае ^ ся следующим простым примером (С. Н. Берн¬ 
штейн): множество Е состоит из четырех элементов А, а' С оот 

ветствующие элементарные вероятности р ь РвІ X 

равными —, и 

4 

А - { іш ь в = {* 1в із }, с = { е 19 { 4 }. 

Легко тогда сосчитать, что 

Р (Л) = Р (В) = р (С) = ±, 

Р(АВ) = Р (ВС) = Р (АС) = -!.= 

Р (ДРС, = і + В)' • 2 

изведения вероятностей по формуле (3). “Ч^ечении через про- 

2 * 







20 


ЭЛЕМЕНТАРНАЯ ТЕОРИЯ ВЕРОЯТНОСТЕЙ 


В случае п = 2 условия (7) сводятся к двум уравнениям: 


Р д ЛА 2 ) = Р (^а). 


Ра 2 ( Л і) = Р ( Л і)’ 


(8) 


Легко усмотреть, что уже одно лишь первое уравнение (8) 
представляет необходимое и достаточное условие независимости 

А х и А ъ если только Р(А 1 )>0. 


8 6. Условные вероятности как случайные величины, 

цепи Маркова 


Пусть является разложением основного множества Е\ 


Е = А х + А 2 + ... + А 


а х _действительная функция элементарного события которая 

на каждом множестве равняется соответствующей константе а г 

В этом случае говорят, что х — случайная величина , а сумму 


Е(х) = 2 а о Р( д «) 


1 

называют математическим ожиданием величины х. Теория 
случайных величин и их математических ожиданий будет раз¬ 
вита в третьей и четвертой главах, не ограничиваясь при этом 
случайными величинами, которые могут принимать только ко¬ 
нечное число различных значений. 

_ _ ~ тупАтл тт/лжж милм/РГТПР Д ППИ- 


ЧНиС Чпи -- 

Случайную величину, которая на каждом множестве при¬ 


нимает значение Рл а (В), мы назовем условной вероятностью 

события В после данного испытания ‘ЗІ и обозначим через 
Рэд(В). Два испытания тогда и только тогда независимы, если 


Р„ ( „ Ю = Р Ю й - 1 ■*•■ • • ■• • г >>- 


Если даны какие-либо разложения (испытания) ^ \ > 

Т ° ЧеРе3 ... 01 (п) 


мы обозначим разложение множества Е на произведения 
АП А< 2 >... . Испытания < 2І (1) , <Ц (2) ,. .., тогда и только 

яі 42 4п 

тогда взаимно независимы, если 

Р <21 (1 ) <л< 2 )... = Р ) 

при любом выборе к н Ч 1 ). 


і) Необходимость этих условий следует 
они также являются достаточными, можно 
из теоремы умножения [формула (7), § 4]. 


из теоремы II, § 5, а что 
заключить непосредственно 
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Определение. Последовательность испытаний 

<21 (1) , < 21 (2) , ..., 21 (п) ,... 
бразует цепь Маркова, если при любых п и 

Цепи Маркова образуют естественное обобщение последо¬ 
вательностей взаимно независимых испытаний. Если положить 

< т - "> = р <? Ю (т < ">• 

то основная формула теории цепей Маркова будет иметь вид: 

Р тп (к, п) = 2 Ртш ( к > т ) РчтЧп ( т > п ) (к <т< п). (1) 

Ят 

Обозначив матрицу ||Ра т д п (/л, л)|| через р(т, и), можно (1) 
записать в следующем виде: 


р (к у гі) = р ( к, т) р (ш, п) (к<т <п) 1 ). 


( 2 ) 


*) По. поводу дальнейшего развития теории цепей Маркова ср» 
К. ѵ . Мі$ез [1], § 16 и В. Нозііпъку , МёіЬобез ^ёпёгаіез би саісиі без 
ргоЪаЫШёз. ,,Мёт. 8сі. таіЬ.^‘, вып. 52, Рагіз 1931. 


И. БЕСКОНЕЧНЫЕ ПОЛЯ ВЕРОЯТНОСТЕЙ 
§ 1. Аксиома непрерывности 

Мы обозначаем, как обычно, через ®А т пересечение мно¬ 
жеств А т (в конечном или бесконечном числе) и через 3 А т 
их сумму. Только в случае непересекающихся множеств А 

пишут 2 А вместо @ А . Следовательно, 

т т 

® А — + А + • • •» 

т 

2 А = + -^2 + А» + • • • » 

т 

® А т = А 1 А а ^з • • • 

т 

При всех дальнейших рассмотрениях мы предполагаем, что 
кроме аксиом 1—V выполняется еще следующая аксиома. 

VI. Для убывающей последовательности 

А 1 ЭЛ 2 ЭА 3 Э...ЭА 11 Э... (1) 

событий из такой , что 

®А- О, (2) 

п 

имеет место равенство : 

Ііш р (Д п ) = 0. (3) 

п-> со 

Во всем дальнейшем изложении мы называем полем вероят¬ 
ностей только такое поле вероятностей в смысле главы первой, 
которое, кроме того, удовлетворяет аксиоме VI. Поля вероятно¬ 
стей в смысле главы первой можно называть полями вероятно¬ 
стей в расширенном смысле . 

Если система множеств <5 конечна, аксиома VI следует из 
аксиом I—V. В самом деле, в этом случае существует только 
конечное число различных множеств в последовательности (1); 
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пусть А. — наименьшее из них, тогда все множества А , сов- 
падают с А к , и мы, следовательно, получаем: 

Л=Л + » = ®(Л)=о. 

' П 

Ііш Р (Л п ) = Р (0) = 0. 

Все примеры с конечными полями вероятностей из первой главы 
удовлетворяют, следовательно, также аксиоме VI. Система акси¬ 
ом I—VI является, таким образом, непротиворечивой и неполной. 

Напротив, для бесконечных полей аксиома непрерывности VI 
является независимой от аксиом I—V. Так как новая аксиома 
существенна лишь для бесконечных полей вероятностей, то 
является почти невозможным разъяснить ее эмпирическое значе¬ 
ние, например, так, как это было вкратце проделано для 
аксиом I—V в § 2 главы первой. При описании какого-либо 
действительно наблюдаемого случайного процесса можно полу¬ 
чать только конечные поля вероятностей. Бесконечные поля 
вероятностей появляются только как идеализированные схемы 
действительных случайных явлений. Мы произвольно ограничи¬ 
ваемся при этом такими схемами, которые удовлетворяют ак¬ 
сиоме VI. Это ограничение оказалось целесообразным в самых 
различных исследованиях. 

РАСШИРЕННАЯ ТЕОРЕМА СЛОЖЕНИЯ. Если А І9 

А п , ... и А принадлежат к <5, то из 



II 

ь. 

1 

(4) 

следует равенство: 

Р(Л) = 2 Р и*). 

п 

(5) 

Доказательство . 

Положим 





Тогда, очевидно, 

®(Я п )-0, 

п 


и, следовательно, по 

аксиоме VI 



ІІШ Р(/? п ) = 0. 

(6) 


п —* оо 


С другой стороны, по теореме сложения 

Р ( Д) = Р (Л,) + р (Л 2 ) + ... + Р(Л п ) + Р (/?„). (7) 

Из (6) и (7) следует непосредственно (5Ѵ 
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Итак, мы доказали, что вероятность Р (Л) является на <5 
вполне аддитивной функцией множеств. Обратно, аксиомы V 
и VI имеют место для всякой определенной на каком-либо 
теле множеств вполне аддитивной функции множеств *). 
Можно, следовательно, понятие поля вероятностей определить 
следующим образом. Пусть Е — произвольное множество , ^ — 
тело подмножеств из Е , содержащее Е, а Р (Л) — неотрица¬ 
тельная определенная на <5 вполне аддитивная функция мно¬ 
жеств ; тело множеств <5 совместно с функцией множеств 
Р(Л) образуют тогда поле вероятностей . 

ТЕОРЕМА О ПОКРЫТИЯХ. Если А ѵ Л 2 ,..., А п> ... принад. 

лежат <5 и 

А С ©Л_. /й'і 


( 8 ) 


ТО 


Р М)< 2 Р (А п ). 


(9) 


Доказательство. ъ 

Л=Л© Л П =ЛЛ 1 + Л (Л2—Л 2 Л 1 )+Л (Л 3 —Л 3 Л 2 —Л 3 Л 2 ) + ... 
Р(Л) = В (ЛЛ 2 )+Р { Л (Л 2 —ЛоЛ,)}+.. .<Р(Л,)+Р (Л 2 )+ ... 


§ 2. Борелевские поля вероятностей 

Тело множеств <5 называется борелевским телом , если все 
счетные суммы ^ множеств А п из <5 принадлежат Бо- 

» 

релевские тела называют также вполне аддитивными системами 
множеств. Из формулы 

© Л п = Лі + (Л 2 — А 2 Л|) + (Л 3 — Л 3 Л 2 — Л 3 Лі) + ... (1) 

« 

можно заключить, что борелевское тело содержит также все 
суммы © Л п , составленные из счетного числа принадлежащих 

п 

ему множеств А п . Из формулы 

= ( 2 ) 

п п 

следует то же для пересечений множеств. 

Поле вероятностей является борелевским полем вероятно - 
стей, если соответствующее тело множеств является боре¬ 
левским. Только при борелевских полях теория вероятностей 
получает полную свободу действия, не связанную с опасностью 


*) См., например, О. Мікосіут, 8иг шіе дёпёгаіізаііоп без іпіё^гаіез 
бе М. Кабоп, „Рипбат. МаіЬ.“, т. 15, 1930, стр. 136. 
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притти к событиям, которые не имеют никакой вероятности* 

Мы теперь покажем, что можно ограничиться рассмотрением 

борелевских полей вероятностей. Это будет следовать из так 

называемой теоремы о продолжении, к которой мы сейчас 
перейдем. 

Пусть дано поле вероятностей (ф, Р). Как известно *), су- 
ществует наименьшее борелевское тело содержащее 

Имеет место 

ТЕОРЕМА О ПРОДОЛЖЕНИИ. Определенную на ^ неот¬ 
рицательную вполне аддитивную функцию множеств Р(А) 
можно всегда продолжить с сохранением обоих свойств (неот - 
рицательности и полной аддитивности) на все множества В$, 
и притом единственным способом. 

Расширенное тело В <5 образует вместе с продолженной функ¬ 
цией множеств Р (Л) некоторое поле вероятностей (В<5, Р). Это 

поле вероятностей (В^, Р) назовем борелевским расширением 
поля (<5, Р). 

Доказательство этой теоремы, которая относится к теории 
аддитивных функций множеств и которая в основном должна 
быть известна в различных других трактовках, проводится сле¬ 
дующим образом. 

Пусть А — некоторое произвольное подмножество Е; мы опре¬ 
деляем Р*(Д) как нижнюю границу сумм 

2 р ( А п) 

V п 

для всех покрытий 

л С6Л П 

п 

множества А конечным или счетным числом множеств А из 

Легко доказать, что Р*(Л) является внешней мерой в смысле 
Каратеодори 2 ). Согласно теореме о покрытиях (§ 1), р*(Д) 
совпадает с Р (Л) для всех множеств из $•. Далее доказывается, 
что все множества из ^ измеримы в смысле Каратеодори. Так 
как все измеримые множества образуют борелевское тело, то, 
следовательно, все множества из В& являются измеримыми. 
Функция множеств Р*(Л) является, следовательно, вполне адди¬ 
тивной на и мы можем положить на В& 

Р (Л) = Р* (Л). 

Этим доказано существование продолжения. Единственность 
продолжения следует сразу же из минимальных свойств тела В&, 


*) НаивйогНу Меп^епІеЬге, 1927, стр. 79. 

2 ) СагаіНёойогу , Ѵогіезип^еп ііЬег гееііе Рипкііопеп, 1918, стр. 237—258- 
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Замечание. Если множества (события) А из 5 могут иметь 
смысл в качестве действительных и наблюдавшихся (хотя бы прибли¬ 
женно) событий, то отсюда еще не следует, что множества из расши¬ 
ренного тела В& допускают такое же разумное истолкование в качестве 
действительно наблюдавшихся событий. Может случиться, что поле 
вероятностей (5, Р) можно рассматривать в качестве (хотя бы идеали¬ 
зированного) образа действительных случайных событий, в то время 
как расширенное поле вероятностей (В^> Р) остается чисто математи¬ 
ческим построением. . 

Множества из В$ мы рассматриваем только как „идеальные сооы- 

тия*, которым ничего не соответствует во внешнем мире. Если, однако, 
рассуждение, которое использует вероятности^ таких идеальных собы¬ 
тий, приводит к определению вероятностей действительного события из 
<5, то это определение, очевидно, автоматически будет непротиворечи¬ 
вым и с эмпирической точки зрения. 

§ 3. Примеры бесконечных полей вероятностей 

I. Еще в первой главе, § 1, мы строили различные конечные 
поля вероятностей. Пусть теперь 

Е = І9 • • • » • 1 

— счетное множество, а <5 совпадает с совокупностью всех под¬ 
множеств множества Е. , 

Все возможные поля вероятностей с таким множеством ф 
получаются следующим образом! берется последовательность 

неотрицательных чисел р п при условии 

Рі + Рг Н“ • • • + Рп “Ь * • • = * 

и полагается для каждого множества А 

Р(А)-2'р„, 

п 

причем суммирование 2* распространяется на все те индексы Н, 
для которых | п принадлежит А . Эти поля вероятностей, оче¬ 
видно, являются борелевскими. 

II. Мы теперь предположим, что Е представляет собой действи¬ 
тельную числовую ось. Сначала пусть при этом ^ образовано 
из всевозможных сумм полуоткрытых интервалов [ й , Ь) = 
= {а<ё<Ь} (при этом мы рассматриваем наряду с собственными 
интервалами с конечными а и Ь также и несобственные 
[—оо, а ), [а, +оо) и [— ОО, + со)). Легко убедиться, 
что ^ является телом. По теореме о продолжении можно, 
•однако, каждое поле вероятностей из <5 расширить в подобное 
поле из В<5. Система множеств В<$ в нашем случае является не 
чем иным, как системой всех борелевских множеств числовой 
гоямой. Перейдем теперь к следующему случаю. 
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III. Предполагается, что Е — действительная числовая ось, 
а <5 состоит из вех борелевских точечных множеств этой пря¬ 
мой. Для построения поля вероятностей с данным телом ^ 
достаточно определить любую неотрицательную вполне аддитив¬ 
ную функцию множеств Р (Л) из <5, удовлетворяющую условию 
Р(Я) = 1. Такая функция, как известно 1 ), однозначно опреде¬ 
ляется своими значениями 

Р [— оо, X) =Р(х) (1) 

для специальных интервалов [—оо, л;). Функцию Р(х) называют 
функцией распределения Далее доказывается (третья глава, 
§ 2), что Р(х) не убывает, непрерывна слева и имеет следую¬ 
щие предельные значения: 

Ііш Р(х)*=Р( —оо) = О, 

Ііш Р (х) = Р(+оо) = 1. (2) 

х -* + оо 

Обратно, если дана функция Р (х), удовлетворяющая этим 
условиям, то она всегда определяет неотрицательную вполне 
аддитивную функцию множеств Р (Л), такую, что Р ( Е) = 1 2 ). 

IV. Пусть теперь за основное множество Е принимается 

Л-мерное евклидово координатное пространство /? п , т. е. мно¬ 
жество всех упорядоченных комплексов | = {х р х 2 , ... , Х п } из 

Л действительных чисел. ^ пусть состоит при этом из всех 

борелевских точечных множеств 3 ) пространства /?*. На осно¬ 
вании рассуждений, аналогичных приведенным в примере II, мы 
можем отказаться от рассмотрения более узких систем множеств, 
например системы всех л-мерных интервалов. 

За вероятностную функцию Р(Л) здесь, как всегда, можно 
принять любую неотрицательную и вполне аддитивную функцию 
множеств, определенную на ^ и удовлетворяющую условию 
Р (Е) = 1. Такая функция множеств однозначно определяется, 
если даны ее значения: 


р(^ 


аі, аа 


• • • 


а п 


) — ^(^ 1 » ^ 2 » 


• • 




для специальных множеств Ь п „ ' , вде „ озна- 

чает множество всех для которых х { < й { (і = 1, 2, .. • , л). 


г ) Ср., например, Лебег , Интегрирование и отыскание примитивных 
функций, ГТТИ, 1934, стр. 127—132. 

*) Ср. предыдущую сноску. 

3 ) Определение борелевских множеств в Я п ср. Нашйог#, Меп^еп- 
Іе’іге, 1937, стр. 177—181. 
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За функцию Р (а ѵ а л , , а я ) можно при этом выбрать любую 
функцию, не убывающую по всем переменным и непрерывную 
слева, которая удовлетворяет следующим условиям: 


Ііш Р (а ѵ а ѵ ... , а п ) 


— СО 


= Р(а ѵ — оо,.... а п ) = 0 (і— 1,2, п), I ^ 

Нт [Р (а ѵ а ѵ . .а п )= /"(Ч-ос.+оо, +оо)= 1. 

аі -*• + оо, аі-* + оо» ••• » я п -* + со ) 

р а ^ % и и 9 д п ) называют функцией распределения величин 

^Рассмотрение полей вероятностей вышеопределенного типа 
достаточно для всех классических проблем теории вероятно¬ 
стей 1 ). В частности, вероятностная функция в Я п может быть 
определена так: берется любая определенная в Я п неотрицатель- 
ная функция точки / (Х ѵ Х 2 , . , Х п ), такая, что 

-Кро +‘со + ОО 

/ / / /( Х 1’ **' ••** Х п) гіХ 1 ЙХ 2 ••• гіХ п ==1 > 


( 4 ) 


— оо —оо 


и полагается 


р< л >=//•••/ 


( 5 ) 


,, х \ ЯВ ляется в этом случае плотностью вероят - 

поста в точке {х ѵ Х 2 , ..., х я ) (ср. глава третья, § 2). 

Другой тип вероятностных функций в Я п получается следую¬ 
щим образом. Пусть {$,} — последовательность точек из Я и 
последовательность неотрицательных действительных чи¬ 
сел, такая, что 2 Р* = 1 ’ тогда ’ таК Ж6 КЗК И ® примере 
полагаем 

р(А) = 2Ѵ<, 

причем суммирование 2' распространяется на все те индексы, 
для которых | принадлежит А. Оба упомянутых здесь типа 

»> Со., например, Я. ѵ. Мізез [1], стр. 13-19. Здесь требуетсясуще- 
ствованиё вероятностей для .всех практически возможных множеств 
п-мерного пространства. . • - ^ • 
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вероятностных функций в /? л не исчерпывают всех возможно¬ 
стей, хотя ими обычно довольствуются в приложениях теории 
вероятностей. 

Можно, однако, себе представить кроме этой классической 
области также и другие, интересные для приложений задачи, 
в которых элементарные события определяются с помощью бес¬ 
конечного числа координат. Соответствующие поля вероятностей 
мы исследуем ближе после введения некоторых необходимых для 
этого вспомогательных понятий (ср. глава третья, § 3). 


» 

/ 



^ III. СЛУЧАЙНЫЕ ВЕЛИЧИНЫ 

§ 1. Вероятностные функции 

Пусть дано отображение множества Е в множество Е\ состоя¬ 
щее из каких-либо элементов, т. е. определенная на Е одно¬ 
значная функция и(і-), значения которой принадлежат множе¬ 
ству Е Каждому подмножеству А ' из Е' мы ставим в соот¬ 
ветствие в качестве его прообраза в Е множество ѵГ 1 ( А ') всех 
элементов из Е , которые отображаются в один из элементов Л'. 

Пусть далее <5 (п) — система всех подмножеств А ' из Е\ прооб¬ 
разы которых принадлежат к телу множеств <5 (и) тогда также 

является телом; если при этом ^—борелевское тело, то то же 

имеет место и для & и \ Мы полагаем теперь 

Р (и) (Л') = Р{и- 1 (Л / )}. (1) 

Эта определенная на & и) функция множеств Р (и) удовлетворяет 
относительно тела <5 (и) всем нашим аксиомам I—VI и, следо¬ 
вательно, является вероятностной функцией на <5 (и) . Прежде чем 
перейти к доказательству всех только что указанных фактов, мы 
сформулируем уже теперь следующее определение. 

Определение. Пусть дана однозначная функция и(^) 

случайного события Тогда функция Р (и) (Л'), определенная 
формулой (1), называется вероятностной функцией от и . 

Примечание 1. При исследовании поля вероятностей (З 1 , Р) фун¬ 
кцию Р (А) называют просто вероятностной функцией, а Р< и) (А')—веро- 
ятностной функцией от и. В случае и ($) = Р (и) (А') совпадает с Р (А). 

Примечание 1 2. Событие и~ 1 (А') состоит в том, что и($) при¬ 
надлежит множеству А'. Следовательно, Р (и) (А') есть вероятность того, 
что и{() с А'. 

Нам осталось доказать вышеупомянутые свойства и Р (и) . 
Они следуют, однако, из одного единственного факта, а именно 
следующего: 

ЛЕММА. Сумма , пересечение и разность каких-либо прооб¬ 
разных множеств и 1 (А') являются прообразами соответ¬ 
ствующих сумм , пересечений и разностей множества А', 
Доказательство этой леммы предоставляется читателю. 
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Пусть теперь А* и В'— два множества из ^ (и) , их прооб¬ 
разы А и В принадлежат тогда <5; так как <5 — тело, то мно¬ 
жества АВ У А + В и А — В также принадлежат ф, но этн 
множества являются прообразами множеств А'В\ А' + В' и 

А ' — В' у следовательно, последние множества принадлежат к . 

Итак, мы доказали, что ^ (гі) — тело. Так же доказывается, что, если 

<5 является борелевским телом, то то же справедливо и для & и \ 
Далее ясно, что 

Р (и) (Е') = Р {и- 1 (Е')} = Р(ЕУ= 1. 

Что Р <и) всегда неотрицательна, понятно само собой. Следова¬ 
тельно, остается доказать, что Р (и) вполне аддитивна (ср. конец 
§ 1 главы второй). 

Итак, пусть множества А п , , а следовательно, и их прообразы 
и~ 1 (А п ) не пересекаются, отсюда следует, что 

=2р{и- , (а;)}=2р«(л;) > 

чем доказана полная аддитивность Р (и) . 

В заключение заметим еще следующее. Пусть и г (^) — функция* 
отображающая Е в Е ѵ а и 2 (С) —другая функция, отображаю¬ 
щая Е' в Е". Тогда сложная функция и 2 и 1 (і) отображает мно¬ 
жество Е в Е". Мы рассмотрим теперь вероятностные функции 

Р (иі) (Л') и Р (и> (А") для Функций и х (|) и и (!) = и & и г (|). 
Эти две вероятностные функции связаны, как легко подсчитать, 
следующим соотношением: 

Р (и) (А") = Р (иі) {и; 1 (А*)}. (2> 

§ 2. Определение случайных величин, функции 

распределения 

Определение. Однозначную действительную функцию х (|), 
определенную на основном множестве Я, называют случайной 
величиной , если при каждом выборе действительного числа а 
множество {х<а} всех для которых справедливо неравенство 
X < а 9 принадлежит к системе множеств <5. 

Эта функция х(|) отображает основное множество Е на мно¬ 
жество К 1 всех действительных чисел. Наше определение слу¬ 
чайной величины можно теперь сформулировать так. Действи¬ 
тельная функция х(|) является тогда и только тогда случайной 

величиной, если содержит каждый интервал вида (— со; а )* 
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Так как <5 (ж —тело, то оно содержит наряду с интервалами 
{— оо, а ) также всевозможные конечные суммы полуоткрытых 
интервалов [а; Ь). Если наше поле вероятностей борелевское, то 

и & х) являются борелевскими телами, следовательно, в этом 

случае <5 (х) содержит все борелевские множества К 1 . Вероят¬ 
ностную функцию случайной величины мы будем в дальнейшем 

обозначать через Р (л) (А'). Она определена для всех множеств 

тела < 5 :(ж> . В частности в важнейшем случае борелевского поля 

вероятностей Р (ж) определена для всех борелевских множеств /?*. 
Определение. Функция 

Г (Х) (а) - Р (х) (— сю, о) = Р {х < а), 

причем — оо и +оо допускаются в качестве значений а, назы¬ 
вается функцией распределения случайной величины х. 

Из определения непосредственно следует, что 

Р (х:) (—оо) = О, Р (х) (+оо) = 1. (1) 

Вероятность выполнения обоих неравенств а < х < Ь, очевидно, 
задается формулой: , | 

Р{ХС[ 0 , Ь)} = рЫ (Ь) ~ Р™ (а). (2) 

Отсюда следует, что для а < Ь 


Р {х \а)<Р (х) (Ь), 

это означает, что Р (х) (а) — Неубывающая функция. 

Пусть далее а г < а г < а 3 < ... < а„ < ... -► Ь, тогда 

Ф {х С [а п , Ь )} = О, 

п ѵ 

следовательно, согласно аксиоме непрерывности 

Р {х) (Ь) — Р (х) (а п ) = Р{хС [а п> Ь)\ 

стремится к нулю при п оо. Отсюда видно, что Р^ (а) 
прерывна слева. 

Аналогично можно доказать формулы: 

Ііш Р (х) (а) = Р (х) (—оо) = о, 

а-* — оо 

Ііш Р (х) (а) = Р (Х) (+ со)= 1. 

а -*■-}- со 



( 3 ) 

( 4 ) 


Если поле вероятностей (^*, Р) — борелевское, то значения 

вероятностной функции Р (:,с) (Л) для всех борелевских множеств 
А из 7? 1 однозначно определяются знанием функции распреде- 
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ления Р {х \а) (ср. глава вторая, § 3, Ш). Ък как главным абра- 
чом интересуются только этими значениями Р (А), то функ 

“■ ^ 52 — " г р»» т во все “ диьнеЯшем ттж " т 

существенную роль. 

Если функция распределения Р {х) (а) диференцируема, то 
производную по : 


Г («) - й р " (“> 


называют плотностью вероятности X в точке а. Если при этом 

Р (х) (а) = У’ / (ж) (а) і ^ 


— оо 


для каждого 0, то для каждого борелевского множества Д 
вероятностную функцию можно выразить через / (а) следу¬ 
ющим образом: - 

р(*> (А) = I / <я) (о) гіа. ( 5 ) 

В этом случае говорят, что распределение х непрерывно. 
В общем случае пишут по аналогии: 

рМ (Л) = /‘ дР (х) (а). (6) 

Все введенные понятия допускают обобщение на случай услов¬ 
ных вероятностей. Функция множеств 

>(*>'Л'-=Р (хСД) 


Р % (А) 


является условной вероятностной функцией от X при гипотезе В. 
Неубывающая функция 

^ Х) (а) = Р В (* < «) 

есть соответствующая функция распределения, и, наконец [(в слу¬ 
чае диференцируемости /^(а)], 

4“>)=7а^ (а) 

-условная плотность вероятности X в точке а при гипотезе В. 

§ 3. Многомерные функции распределения 

Пусть теперь даны п случайных величин х ѵ Х ѵ ... , х п . Точка 
Х = (х X ... , х) Я-мерного пространства /? п является функ¬ 
цией элементарного события & Следовательно, по общим пра- 

3 Колмогоров. Основы теории вероятностей 


34 


СЛУЧАЙНЫЕ ВЕЛИЧИНЫ 


вила» § 1, получаем тело множеств **. 

подмножеств пространства , и определенную на ^ 

вероятностную функцию Р (Жі ’ * 2 .^ (А'). Эту вероятностную 

функцию называют п-мерной вероятностной функцией случаи- 

них величин х ѵ х ѵ ... , х п - 

Тело & Х1 ’ * 2 ’ *" * Хп ^ содержит, как это прямо следует из опре- 

деления случайной величины, при каждом выборе і и а { 

(і = 1 2 гі) множество всех точек /?”, для которых X, < а ѵ 

Следовательно,’ 3 (Ж1 '* 2 .* п) содержит также и пересечение 

указанных множеств, т. е. множество аіа 2 ...а п 

/? п для которых выполняются все неравенства х і < о г , 
і = 1, 2,. , П г ). Если назвать п-мерным полуоткрытым интервалом 

[«!) а 2 > • • • ’ а п’ • • • » Ь г) 

множество всех точек /Г, для которых выполняются все нера¬ 
венства < X, < Ь ѵ то видно сразу, что каждый такой интер¬ 
вал также принадлежит телу <5 (Ж1 ' .. > так как 

[а ѵ я 2 ,..., Ь 2 ,..., 6 П ) — 


ЧіЬ 2 ... Ь п ... Ьп ^Ьіа 2 Ь* ... Ь п 


• • 




Ьі&2 ... ь„— і ап» 


Борелевское расширение системы всех п-мерных полуоткрыты 
интервалов состоит из всех борелевских множеств Я . Отсюда 

следует что тело * 2 .* п> « случае борелевского поля 

вероятностей содержит все борелевские множества про- 

‘ГеОГША в случае борелевского поля вероятностей каждая 
і пиг елпл. ѵ _ // ѵ V V ^ конечного числа Случаи- 

борелевская функция х — /(Х р х 2 ,..., а п ) 

ны * величин Х ѵ х ѵ ..., х„ тоже является случайной величиной. 
Для доказательства достаточно заметить, что множество всех 

точек (х„ х 2 , ... , * я ) из Я я , для которых х = /(х р х 2 ,.. • ,х„) < а 

является бопелевским. В частности, все конечные суммы и про¬ 
изведения случайных величин тоже являются случайными вели- 

чинами. 

Определение. Функцию 

р*ь .. {а ѵ а ѵ ... , а п ) = Р (жь * 2 . * п) (С 

мы называем п-мерной функцией распределения случайных вели- 

А * 


’аіаг 


) 


ЧИН X,, ^2, 


• • 


п 


») 0) могут принимать также бесконечные значения ± оо. 
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Доказывается, как в одномерном случае, что п-мерная функция 

распределения 7 7 ** 1 ** 2 .* п) ( а ѵ а 2і ... , а п ) не убывает по всем 

переменным и непрерывна слева. Аналогично равенствам 
(3) и (4), § 2, имеем здесь: 

1ІЛ1 Р * • • У ®ѵ) = ^ • • • > СО > * * * > = (^) 

аі~+ — оо 


Нш о 2 , ... , о п ) = / 7 (+оо, +оо, ... , +оо)= 1. 

аі —+оо, а 2 -*-+оо, ... , а п ->+оо 


( 8 ) 


Функция распределения Р (Х1 ’ Х2> *” * * п) непосредственно дает нам 

значения р( х ь**> •••»***) только для специальных множеств 
^ а і ^ . Если, однако, наше поле вероятностей — боре- 

левское, то р (Хі,Х2> — * * п) однозначно определяется для борелев- 

ских множеств через функцию распределения р^* 1 ' х * *** ’ Хп) *). 
Если существует производная 

/° 2 > • > а ,) ~ да г да 2 ... да п 


Р7 ( Х 1> Х %> “• » Х Ті) /л « /> \ 

1 и 2> • • • 9 и п )> 


то эту производную / называют п-мерной плотностью вероят¬ 
ности случайных величин х ѵ х 2 , ... , х п в точке (сі ѵ а 2 , .. ѵ а п у 

Если при этом для каждой точки (а х , о 2 , ... , а п ) 

Р ІХі,Хі . Хп \а ѵ а 2 , ..., й п )= - ' 7 "|Ц| 


•і а 2 а п 

//■••/ / (^і> " М « п ) ^1 ^2 * * * Аа п> 


оо —оо 


— оо 


то распределение х 1Э х 2 , . .. , х п называют непрерывным . Для 

каждого борелевского множества А С имеет место равенство: 

_ % * . . , 

,<Ж1 ' **. Хп) (А) = ф/■■■/! ( а ѵ а Ѵ • * • » й „) Ла 1 йа 2 ■ ■ ■ йа п- ( 9 ) 

А 

В заключение этого параграфа сделаем еще одно замечание о 
соотношениях между различными вероятностными функциями и 
функциями распределения. Пусть дана сперва подстановка 


1, 2/..., П \ 

• • I ^ 

1 \> • • • > І п! 


и пусть г а означает преобразование 


Ъ Ч; 


1=3 1 1 2, ..., л) 


*) Ср. глава вторая, § 3, IV. 
3* 
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пространства Ц п в самого себя. Тогда ясно, что 

р(*ііі Г І 2 . ••• > *іп) ^Д) _ р(*1> *2> Хп) | у— 1 (1^) 

Пусть теперь х' = р к (х) — „проекция" пространства Я п в про¬ 
странство /? ь (к < п), при которой точка (х ѵ Х 2 ,..., Х п ) ото¬ 
бражается в точку (х ѵ х 2 , ... , х А ). Тогда вследствие формулы 
( 2 ) § 1 

р(*1» *2, ... , *к) ^ Д ) _ р(*1» Х2> ••• > Хп) ^р_1 ^Д)| . ^ 

Для соответствующих функций распределения следуют из (10) 
и (11) равенства: 

р(ХІЪ *і„ ••■>*%> (а к , о І2 , ..., а іп ) = 

= / 7(Ж1,Ж2 . Хп) (а ѵ а 2 ,а п ), 

Р ІХ1 ' . . . ч) (а ѵ а 2 , , я й ) = 

= / 7(Ж1 ' Жз . Хп) (а ѵ а к , +оо,..., +оо). 


§ 4. Вероятности в бесконечномерных пространствах 

В § 3 главы второй мы видели, как строятся различные при¬ 
меняющиеся в теории вероятностей поля вероятностей. Можно, 
однако, представить себе интересные также и для приложений 
проблемы, в которых элементарные события определяются с по¬ 
мощью бесконечного числа координат. Итак, пусть выбрано 
множество М индексов [л любой мощности ш. Совокупность 
всех систем 

действительных чисел х , причем р пробегает все множество М, 

назовем пространством Н м (для определения элемента | про¬ 
странства /? м следует каждому элементу ^ множества М поста¬ 
вить в соответствие действительное число х^ или, что то же 

самое, задать определенную на М однозначную действительную 
функцию Х и элемента [л) х ). 

Если множество М состоит из п первых натуральных чисел 

1, 2 ,..., п, то /? м есть обычное Я-мерное пространство . 
Если выбрать в качестве множества М множество всех действи¬ 
тельных чисел 7? 1 , то соответствующее пространство Н м = /? КІ 
состоит из всех действительных функций 

(<“) = 

действительного переменного /л. 


г ) Ср. НаизсІогЦ , Меп^епІеЬге, 1927, стр. 23. 
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Множество /? м при произвольном множестве М мы примем 
сейчас за основное множество Е . Пусть {х^}—элемент Е; 

мы обозначаем тогда через р п ^ т (() точку (х^, х м ,..., Х^) 

П-мерного пространства В п . Подмножество А из Е мы назовем 
цилиндрическим множеством, если оно представимо в форме: 

Л = р _1 (Л'), 

Г М. /*2 ... /*П 4 /> 

где Л' есть подмножество /? п . Класс всех цилиндрических мно¬ 
жеств совпадает, следовательно, с классов всех таких множеств, 
которые могут быть определены соотношениями вида: 

/ > ^ п ) — N (О 

Для того чтобы произвольное цилиндрическое множество 

определить таким соотношением, достаточно при¬ 
нять за / функцию, которая на Л' равна нулю, а вне Д' равна 
единице. 

Цилиндрическое множество является борелевским цилиндриче¬ 
ским множеством, если соответствующее множество А' — боре- 
левское. Все борелевские цилиндрические множества простран¬ 
ства /? образуют тело, которое в дальнейшем будет обозна¬ 
чаться через ^ м г ). 

Борелевское расширение тела мы обозначим, как всегда, 
через В^ м . Множества из системы В^ м мы называем борелев - 

сними множествами пространства /? м . 

Далее будет дан метод для построения и оперирования с веро¬ 
ятностными функциями на <5 м и, следовательно, по теореме о 

продолжении также и на В$ м . В случае счетности множества 
М получаемые таким образом поля вероятностей достаточны для 
всех целей. Мы овладеваем, следовательно, всеми вопросами, 
касающимися счетной последовательности случайных величин. 

г ) Из вышеприведенных рассуждений следует, что борелевские цилин¬ 
дрические множества — это те, которые могут быть определены борелев- 
скими соотношениями (1). Пусть теперь А и В — два цилиндрических 
множества, определенных соотношениями: 

/ (*иі’ Х 1 х 2 > - • •» х ц п ) = °» 2 (*;*> • • •» Хят) = °. 

Тогда множества А + В, АВ и А — В можно определить соответ¬ 
ственно следующими соотношениями: 

/•2 = 0, / 2 + 2 я = Р,/ а + а)(Й =0, 

где а>(х) = 0 для хф0исо(0)=1. Если /иборелевские функции, то 
таковыми же являются /•& / 2 + и / 2 ф со (#), следовательно, ДфВ, ДВ 
и Д —В являются борелевскими цилиндрическими множествами. Этим 

доказано, что система множеств является телом. 
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Если же М несчетно, то тогда многие простые и интересные 

подмножества остаются вне системы В^ м . Например, мно¬ 
жество всех элементов для которых х^ при любом выборе 

индекса [л остается меньше какой-либо постоянной величины, не 

принадлежит к системе в случае несчетности множества М. 

Следовательно, всегда стоит добиваться, если это возможно, 
приведения всякой проблемы к такой форме, при которой про¬ 
странство всех элементарных событий | имеет только счетное 
множество координат. 

Пусть на <5 м определена вероятностная функция Р(Л). Каж¬ 
дую координату X^ элементарного события | можно тогда рас¬ 
сматривать как случайную величину. Следовательно, всякая 
конечная группа (х^ х ..., Х т ) этих координат имеет п-мер- 

ную вероятностную функцию Р МЯ2 ...^ П (^) и соответствующую 
функцию распределения ^ М1/Л2 ип ( а ѵ а ѵ • • • > а г)- Ясно, что для 
всякого борелевского цилиндрического множества 


с 



имеет место равенство: 


Р(Д)=Р (Д'), 

1 ѵ ' п вг ■■■ вп ѵ п 

причем А' является борелевским множеством Н п . Таким обра¬ 
зом вероятностная функция Р однозначно определяется на теле 

<5 М всех цилиндрических множеств через значения всех конечно¬ 
мерных вероятностных функций и т для всех борелевских 

множеств соответствующего пространства Н п . Однако для боре¬ 
левских множеств значения вероятностной функции Р пм ... т 

однозначно определяются через соответствующие функции 
распределения. Следовательно, мы доказали следующую теорему. 

Совокупность всех конечномерных функций распределения 
р ' однозначно определяет вероятностную функцию 

их иг ••• ѵп м 

р(Д) для всех множеств из Р . Р(А) (по теореме о про¬ 
должении) определяется однозначно на В^ м значениями функ¬ 
ций распределения Р п п т . 

Теперь можно поставить вопрос, при каких условиях а ргіогі 
заданная система функций распределения ^ ^ определяет 

поле вероятностей на <5 м (и, следовательно, на В ( 5 М ). 

Сперва отметим, что всякая функция распределения ^ т 

должна удовлетворять условиям, данным в главе второй, § 3, 
III, что, конечно, содержится в самом понятии функции распре- 
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деления. Кроме того, вследствие формул (13) и (14) из 
имеют место еще следующие соотношения: 
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§ 2 


Ріі А*і 2 ... 


И1 И2, • • • Ѵк 


(а. а, .... а . ) 

і п ѵ 5 іп 7 


(^і> ^2’ * • •» 


причем к <п и 


иі Р% • • • /*тг 

2 , ... 


(«і. 



( 2 ) 


( 3 ) 


произвольная подстановка. 


гг 


1, 2, ... П 

__ _ . ^2» • • ■'*. ір.-, . . иииидиіии ии иі 

Эти необходимые'условия, однако, являются также и достаточ¬ 
ными, как это явствует из следующей теоремы. 

ОСНОВНАЯ ТЕОРЕМА. Всякая система функций распре¬ 
деления Р , удовлетворяющих условиям (2) и (3), опре - 

:Й ^2 • • • уд 

деляет вероятностную функцию Р (А) на <5 , которая удо¬ 
влетворяет всем аксиомам I — VI. Эта вероятностная функ¬ 
ция Р(А) может бытъ продолжена {по теореме о продолже - 

нии) также и на В^ м . 

Доказа/пелъство. Итак, пусть даны функции распределения 
р , удовлетворяющие общим условиям главы второй, § 3, 

нСиусловиям (2) и (3). Всякая функция распределения^^ т 

однозначно определяет соответствующую вероятностную функцию 
Р для всех борелевских множеств из Р п (ср. § 3). 

1 мм — Ри 

В дальнейшем мы будем рассматривать только борелевские мно¬ 
жества Я п и борелевские цилиндрические множества в Е. 

Для всякого цилиндрического множества 

А =» р “ 1 (А') ' 

г рі № ••• е-п 4 7 

полагаем 

р (А) = Р (А'). 

Так как одно и то же цилиндрическое множество А 
быть определено через различные множества А', то 
сперва доказать, что формула (4) дает всегда одинаковое значе¬ 
ние для Р (А). 

Пусть (х , X ,..., х ) — конечная система случайных вели¬ 
чин х . Исходя из вероятностной функции ^ этих слу¬ 

чайных величин, мы можем согласно правилам § 2 опреде¬ 
лить вероятностную функцию Р^. н ^каждой подсистемы 

(х , X , . .ъ , х ). Равенства (2) и (3) имеют своим след¬ 
ствием, что эта определенная по § 2 вероятностная функция 

совпадает с а ргіогі заданной функцией Р . Мы 

1 2 • * 


(4) 

может 

нужно 
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теперь предположим, что цилиндрическое множество А опре 
деляется через 

А=р~ 1 (А') 

и одновременно через 

А = р - 1 (А"), 

"А • • • "йп 

причем все случайные величины х их. принадлежат системе 

(х^, Х и2 , , X ), что, очевидно, не является существенным 
ограничением. Условия 


(х . , X .х . ) С А' 


Мі х ' #*і 2 


и 


(х , х ..... х ) С. А" 

ѵ V V 9 (і дт 


равнозначащи. Следовательно, 


Р„ (А')==Р {(х , х ,..., х )СА'1 

= Р {(х , х ,..., х ) С А"} 

АЧ... ^71 14 АЧ\ /Чо ’ АЧ*ѵ/ ; 


Л П2 


1т 


*“' м 3т 


. т, 


что доказывает наше утверждение относительно однозначности 
определения Р (А). 

Докажем теперь, что поле вероятностей ($ м , Р) удовлетво¬ 
ряет всем аксиомам I — VI. Аксиома I утверждает только, что 

< 5 М должно быть телом; это обстоятельство было уже доказано 
выше. Далее, при любом р 

Е = р; 1 т, 

Р(Е) = р^(/? 1 )=1, . 

что доказывает применимость аксиом II и IV. Наконец, из опре¬ 
деления Р(А) непосредственно следует, что Р(А) неотрица¬ 
тельна (аксиома ІИ). 

Несколько сложнее доказывается применимость аксиомы V. 
Для этой цели рассмотрим два цилиндрических множества: 



А 


р 1 

н к 


(Л') 


в 


Р м .\. (В 1 ). 

м 3і?32 м 3т 



При этом мы предположим, что все величины х^ и х^. принад- 

л Ъ г * 

лежат к объемлющей их конечной системе (х , X ,..., X ). 

г*1 г* 
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Если множества А и В не пересекаются, то соотношения 


(X , х , ...,Х )СЛ' 

4 Ні Ч 2 9 9 


(X , X ,X ) 
Ѵ Чі Чг ’ Чт 


В ' 


несовместны. Следовательно, 


Р(Л + В) = Р 


Мі М 2 ... Ч 2 


(* > * х иі ) С Л' 


Ч к 


ил ц (х^, я-,..., х^) СВ'} 
{(*«.> • * •> х и . ) ^ } + 




+р 


: ( Ч'*.»""’Ѵ =В ' І “ Р(Л)+Р<В) - 


МІ М 2 ... МП 14 ^2 

Этим наше доказательство закончено. 
Остается аксиома VI. Пусть 


АЭ Я 


. . . Iэ дэ... 

п 


— убывающая последовательность цилиндрических множеств, удо¬ 
влетворяющая условию: 

Пт Р (А п ) — Ь> 0. 

Мы докажем, что пересечение всех множеств А п не пусто. Мож¬ 
но без существенного ограничения постановки вопроса предпо¬ 
ложить, что в определение п первых цилиндрических множеств А к 

входят только п. первых координат х последовательности 

Ч* 


т. е. что 


х а • • • ’\> 

А=р ~ 1 (В А 

П 4^2 •** П ' 


Мы полагаем для сокращения 


Р 


тогда, очевидно, 


(В) = Р (В); 

чч ••• ч } пѴ ; 


р„ №„) = р и„) > і > о. 


В каждом множестве В п можно найти замкнутое ограниченное 
множество II такое, что 

п > 

Р» < В П - Ч) < • 


42 


СЛУЧАЙНЫЕ ВЕЛИЧИНЫ 


Из этого неравенства следует для множества 

V =р~ 1 ВД 


неравенство: 


Пусть далее 


Из (5) следует: 


ѵ/ п ~ѵ г ѵ % ... ѵ п . 

р (А п - \Ѵ п ) < в ; 


(б) 


так как 


то 


VV С.Ѵ СД . 

г п п и’ 


Р(\Ѵ п )>Р(А п ) е>Ь 


Если г достаточно мало, то Р (\Ѵ п ) > 0> и \Ѵ п не пусто. Мы 
выберем теперь в каждом множестве ]Ѵ п точку <? (п) с коорди¬ 
натами х ( "\ Всякая точка $ (п + р \ р = 0,1,2,..., принадле- 
жит множеству Ѵ п , следовательно, 


/ Ѵ (п + Р) у (п + 2>) Лп + ѵ) \ р-і />(п х + рУ V ; 

> х « а ’ -ѵ / шш&ш п 

Так как множества ограничены, можно (диагональный метод) 
из последовательности выбрать подпоследовательность 


ц,- 


*(п. 4 ) &(Ѵ 


.(п,) 


для которой соответствующие координаты х^' стремятся при 

любом й к определенному пределу х к . Пусть, наконец, —точка 
множества Е с координатами 

X = х ь , * 

^ к’ 

X = 0 Си Ф А = 1, 2, 3,...). 

г* 

Точка (х х , х 2 ,. .. , х к ) принадлежит как предел последователь¬ 
ности (х<4 х ( 2 4 х ( ;ф, г = 1, 2, 3,..., множеству Ц к . 

Следовательно, | принадлежит к 

при любом к, а следовательно, и к пересечению 

Л = ©А . 

я * 
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§ 5. Эквивалентные случайные величины, разные виды 

сходимости 


С этого параграфа мы рассматриваем исключительно 
борелевские поля вероятностей . Это не делает, как было уже 
разъяснено в § 2 главы второй, никакого существенного огра¬ 
ничения для наших исследований. 

Две случайные величины х и у называются эквивалентными , 
если вероятность соотношения X ф у равна нулю. Ясно, что две 
эквивалентные случайные величины имеют одну и ту же вероят¬ 
ную функцию 

р<*> (А) = р (и) (А). 

Следовательно, функции распределения Р (х) и Р (у) также 
совпадают. Во многих вопросах теории вероятностей можно 
- заменять какую-либа случайную величину любой эквивалентной 
ей величиной. Пусть теперь 


Хі, 


• • 


п’ 


• • 



—последовательность случайных величин. Рассмотрим множество А 
всех элементарных событий для которых последовательность (1) 

сходится. Если через А^ обозначить множество всех I, для 

которых выполняются все неравенства 

1 Х п + к~~ Х ПІ < "ЯГ (^ = 1 ,. 2, . . . , /?), 


то непосредственно получаем, что 

А = ФбФА™ (2) 

т п р 

Согласно § 3 множества А { ™ ] принадлежат всегда телу мно¬ 
жеств < 5. Соотношение (2) показывает нам, что множество А 
также принадлежит Следовательно , всегда имеет вполне 
определенный смысл говорить о вероятности сходимости 
последовательности случайных величин. Пусть теперь вероят¬ 
ность РІА) множества А равна единице. Тогда мы утверждаем, 
что последовательность (1) сходится с вероятностью единица 
к случайной величине л:, при этом случайная величина X опре¬ 
деляется однозначно с точностью до эквивалентных величин. 
Для определения этой случайной величины лолагаем 

х = Ііш х п 

п -* со 

на А и X = 0 вне А. Нам остается доказать, что X — случайная 
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величина, т. е. что множество А (а) элементов для кото¬ 
рых х < а, принадлежит телу В самом деле, 

л(о) = ле®{х п <«} 

п р 

в случае а<0 и 

• \ ' * * / - ѣ -: ѵ ' • 

Л(а) = ЛѲ® {х <а} + А 

п р 

в противоположном случае, откуда непосредственно следует 
наше утверждение. 

Если вероятность сходимости последовательности (1) к $ 
равна единице, то мы говорим, что последовательность (1) почти 
наверное сходится к х. Однако для теории вероятностей, пожа¬ 
луй^ еще важнее другой вид сходимости. * 

Определение. Последовательность х ѵ Х 2 , х п , ...слу¬ 
чайных величин сходится по вероятности (сопѵёг^е еп ргоЪаЪі- 
Шё) к случайной величине а:, если при любом е > 0 вероятность 

Р{ |Х„— х|>.в'} 

стремится к нулю при п —> со *). 

I. Если последовательность (1) сходится по вероятности 
одновременно к X и к х\ то х и х' эквивалентны . 

В самом деле, 

р(іх'—Х|>і} ср{|х„ —х|> 2йг} + р(!^ — 

так как последние вероятности при достаточно большом п 
сколько угодно малы, то отсюда следует, что 

р(|х-*'| >-І-}=°, 

а теперь уже непосредственно получаем, что 

Р{хфх'}<2 Р { I X — х' I > •— } = 0. 

т 

II. Если последовательность (1) почти наверное сходится 
к х , то она сходится к х также и по вероятности. Пусть 
А — множество сходимости последовательности (1); тогда 

1 == Р 04) < Пт Р{ [ X , — X | < е, р = 0, 1, 2, ...}< 

П-* со 

< Ііт Р{ I х п — X | < е}, 

п -> оо 

откуда следует сходимость по вероятности. 

*) Это понятие восходит в основном еще к Бернулли, однако в пол¬ 
ной общности было введено Е. Е. Слуцким (ср. Зіиізку [1]). 
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III. Для сходимости по вероятности последовательности (1) 
необходимо и достаточно следующее условие . Для любого 
е > 0 существует такое п у что для каждого р > О имеет 
место неравенство : 

Пусть теперь Р х (я), Р 2 (о), /^(я),../^(я) — функции 

распределения случайных величин х ь х 2 ,..., х п ,..., X. Если 

последовательность Х п сходится по вероятности к х, то функция 

распределения Р (а) однозначно определяется знанием функций 
Р п (а), так как имеет место , й 

ТЕОРЕМА. Если последовательность х 1? х 2 , ..., х п сходится 

по вероятности к х, то последовательность соответствую¬ 
щих функций распределения Р п (а) сходится к Р (а), функции 

распределения х, в каждой точке непрерывности Р (а). 

Что Р (а) действительно определяется через Р п (я), следует из 

того, что Р (а) как напрерывная слева монотонная функция 
однозначно определяется ее значениями в точках непрерывности х ). 
Для доказательства теоремы мы предположим, что я является 
точкой непрерывности Р. Пусть а' < я, тогда в случае Х<а', 
х >я необходимо I х м —х 1 > я — я'. Следовательно, 

п п 1 

ІітР(х<а', х п >а) = 0, 

Р (а') = Р (х < а') < Р (х п < а) + Р (х < а’, х п > а) = 

= Р п (а) + Р(х<а', х п >а), 

Р (а')<Ѵ\т\пІР п (а) + ѴтР (х < а\ х п >а), 

Р(а')<\\тіпІР п {а). (3) 

Аналогично доказывается, что из а" > а следует соотношение: 

Р(а")>\іт&ирР п (а). (4) 

Так как Р (а') и Р(а") при а' а па"-* а стремятся к Р (а), 
то из (3) и (4) следует, что 

Нт Р п (а) = Р (а), 

чем наша теорема доказана. 

1 ) В самом деле она имеет самое большее лишь счетное множество 
точек разрыва (ср. Лебег , Интегрирование и отыскание примитивных 
функций, 1934, стр. 70). Поэтому точки непрерывности лежат всюду 
плотно, и значение функции Р (а) в точке разрыва определяется как 
предел ее значений в лежащих слева точках непрерывности. 


IV. МАТЕМАТИЧЕСКИЕ ОЖИДАНИЯ *) 

§ 1. Абстрактные интегралы Лебега 

Пусть х — случайная величина и А— множество из < 5. Обра¬ 
зуем для положительного А сумму 

+СО 

= 2 АЛР{АД<х<(Л+1)А, {С А}. (1) 

к = — со 

Если этот ряд абсолютно сходится при любом А, то при А-*0 
стремится к определенному пределу, который по определению 

есть интеграл 

/х Р (йЕ). (2) 

■'А 

В этой абстрактной форме понятие интеграла было введено 
Фреше 2 ), в частности она необходима для теории вероятностей 
[читатель, впрочем, увидит в следующих параграфах, что обыч¬ 
ное определение условного математического ожидания величины х 
при гипотезе А совпадает с точностью до постоянного множи¬ 
теля с определением интеграла (2)]. 

Мы дадим здесь краткий перечень важнейших свойств инте¬ 
гралов формы (2). Читатель найдет их доказательство в каждом 
учебнике по теории функций действительного переменного, хотя 
они большей частью проведены для случая, когда Р (А) является 

лебеговой мерой множеств в /? п . Перенесение этих доказательств 
на общий случай не представляет никакой новой математической 
задачи; они остаются большей частью дословно теми же. 

I. Если случайная величина X интегрируема на А , то она 
интегрируема на каждом подмножестве А' из А, принадлежащем <5. 

И. Если х интегрируема на А и А распадается на не более 
чем счетное число непересекающихся множеств А п из ^5,'то 

/* хР(йЕ) = 2 / хР(<1Е). 

А п А т 

х ) Как было упомянуто в § 5 главы третьей, мы рассматриваем в этой 
и во всех последующих главах только берелевские поля вероятностей. 

*) РгёсНеі, Зиг І’іпіё^гаіе ё’цпе іопсііоппеі ёіепйие ё ип епзашЫе 
аЪзігаИ, „ВиІІ. Зое. МаШ. Ргапсе*, т. 43, 1915, стр. 248. 
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III. Вместе с X интегрируем всегда и | X |, и при этом 


/ хР((ІЕ)\</\х\Р(йЕ). 


IV. Если в каждом случае I выполняются неравенства 
О < у < X, то вместе с X интегрируемо также ну 1 ), и при этом 

У у Р (ЛЕ) </хР (ІЕ). 

А А 

V. Если т<Х<М, причем т и М — две постоянные, то 

тР(А)<ГхР(йЕ)кМР{А). 


VI. Если X и у интегрируемы, а К и Ь — две действительные 
постоянные, то Кх + Ьу также интегрируемо, и при этом 


/(Юс 


У* хР((ІЕ) + ь/ 


VII. Если ряд 


а/ 

п А 


сходится, то ряд 


2 *п = * 


сходится в каждой точке множества А с точностью до некото¬ 
рого множества В, такого, что Р ( В ) = 0. Если -положить X = О 
всюду кроме А — В, то 


/ 


2 / 


VIII. Если х и у эквивалентны (Р {х ф у} =0), то для каждого 
множества А из ^ 

У хр (<ш) = / ур №). (3) 


IX. Если (3) имеет место для каждого множества А из <5, то 
X и у эквивалентны. 

Из вышеупомянутого определения интеграла получается еще 
следующее свойство, которого нет в обычной теории Лебега. 


і\ При этом предполагается, что у — случайная величина, т. е. в тер¬ 
минологии общей теории интегрирования измерима по отношению к Эѵ 
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X. Пусть Р 2 4А) и Рг(-А) — две вероятностные функции, опреде¬ 
ленные на одном и том же теле <5, Р (А) = Р! (А) + Рг (^) 
и х интегрируема на А относительно Р 2 (А) и Р 2 (А). Тогда 

^ хР (СІЕ) = ^ хр г (ЛЕ) + § хР 2 (йЕ). 

А А А 

XI. Всякая ограниченная случайная величина интегрируема. 

§ 2. Абсолютные и условные математические ожидании 
Пусть х— случайная величина. Интеграл 

Е (х) = I* хР (сІЕ) 

Е * ' ''Щ - | 

называют в теории вероятностей математическим ожиданием 
велишшы X. 

Из свойств III, IV, V, VI, VII, VIII, IX следует, что 

I. |Е(*ЖЕ(|х|). 

II. Е(у)<Е(х), если всегда 0 < у < X. 

III. і пі х < Е (х) < зир х. 

IV. Е (Кх + Ьу) = КЕ (х) + ЬЕ (у). 

V. Е (2 х п) =2Е(Х„), если ряд 2Е(|х п |) сходится. 

п п п 

VI. Если X и у эквивалентны, то 

Е(х) =Е (у). 

VII. Всякая ограниченная случайная величина имеет математи¬ 
ческое ожидание. 

По определению интеграла имеем: 

Е(х) = 1іш 2 ААР{ЛА<х<(Л + 1)Я} = 

К — — со \ ✓ 

4-00 

= Ііт 2 {^((*+ 1)Д)— Е(кХ)}. 

к — — со 

Вторая строка есть не что иное, кай обычное определение 
интеграла Стцльтьеса. 

, 4-00 

/ а йР (х) (а) = Е (х). (1) 

— СО 

Формула (1) может, следовательно, служить определением мате¬ 
матического ожидания Е(х). 
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Пусть теперь и — функция элементарного события ^ а х — 
случайная величина, определенная как однозначная функция от 
ц, х=х{и). Тогда 

Р{АА<х< (к + 1)Л} = Р (и) {Ы<х(«)<(А;+ 1)Я}, 

где Р (и) (А) — вероятная функция от и. Отсюда следует по опре- 
делению интеграла, что 

/хР (сІЕ) = ^ хР (и) (йЕ ,и \ 

Е ЕМ 

и, следовательно, 

Е (х) = / хР (и) (сІЕ м ), (2) 

Е(и) 

причем Е (и) означает множество всех возможных значений и. 

В частности, когда и само является случайной величиной 
то мы имеем: ’ 

Е(х) = /хР (сІЕ) = I* х(и)Р (и) (сІ К 1 ) = 

Я № 

4-оо 

= ) х (а) йР (и) (а). (3) 

—СО 

Последний интеграл в формуле (3) является в случае непрерыв¬ 
ности функции х (и) обыкновенным интегралом Стильтьеса. Однако 
отметим при этом, что интеграл 

4-оо 

/ х(а) ар™(а). 

—СО 

может существовать также и в случае отсутствия математиче¬ 
ского ожидания Е(х). Для существования Е(х) необходима и 
достаточна конечность интеграла 

4-оо 

/1 х (а) | йР іи) (а ) 1 ). 

—°о - > 

Если и — точка (іі 1у ^пространства /? п , то вслед¬ 

ствие (2) 

Е (х) = у /.../ х(щ, ц а ,..., и п ) р (иь К2/ *' Пп \йН п ). (4) 

Е п 

*) Ср. V. Оііѵепко , 8иг Іез ѵаіеигз ргоЬаЫез сіе іопсііопз, „КепсІ. 
Ассасі. Ьіпсеі", т. 8, 1928, стр. 480—483. 

4 Колмогоров. Основы теории вероятностей. 
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Мы уже видели, что условная вероятность Ря (А) обладает всеми 
свойствами вероятностной функции. Соответствующий интеграл 

Е в (х)=/хр„т ( 5 ) 


мы называем условным математическим ожиданием случай¬ 
ной величины х относительно события В. Так как 


Р ЛВ) 


/ 


то из (5) следует равенство: 


Е в (х)= / 


/ хр в т + [ 


/ хР в (йЕ) 


Вспомнив, что.в случае А 


мы получаем: 


р (Л)- Р(АВ) 

к вѴ л )~ р (я) 

Ед (х) = 

р /р\ 


Р И) 

Р(В) ’ 


/ 


/ 


х р(гіЕ) = Р(В)Е в (х). 


( 6 ) 


(7) 


Из (6) и из равенства 


А+В 

следует, наконец: 


/*хР ( йЕ) = /*р (<*Я) + /хР(0Е) 


(х) 


__ Р(Д)Е л (х) + Р(В)Е в (х) 

Ь А+ВѴ^— Р(А + В) 

В частности, имеет место формула: 

Е (х) = Р (Л) Е а (х) + Р (А) (х). 


( 8 ) 


( 9 ) 


§ 3. Неравенство Чебышева 

Пусть і(х) — неотрицательная функция действительного аргу¬ 
мента х у которая при х>а остается не меньше Ь> 0. Тогда 
для любой случайной величины х 


Р(х>й)< Е{/ & (х)} > 

если только существует математическое ожидание Е{/(х)}. 


т 


НЕРАВЕНСТВО ЧЕБЫШЕВА 
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В самом деле, 

Е{/(х)} = / /(х) Р (сІЕ) > У*/(х) Р (сіЕ) >ЬР(х> а), 

Е {х>а} 

откуда непосредственно следует (1). Например, для любого по 
ложительного с 

ШІіІ 


Пусть теперь /(х)— неотрицательная, четная и при положи¬ 
тельном х неубывающая функция. Тогда для каждой случайной 
величины х и при любом выборе постоянной а > О имеет место 
неравенство: 

Р(|х|>а)<^», (3) 

В частности. 


Особо важным является случай /(х) = х 2 . 
и (4) получаем: 

^ (* 2 ) 


В этом случае из (3) 


При этом 


называют дисперсией величины х. Легко подсчитать, что 


Если /(х) ограничена 


можно оценить также снизу. В самом деле 


/ 1(х)Р(йЕ) + у* Дх)Р (ОБ) 


и, следовательно 


( 7 ) 
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Если вместо /(х) случайная величина х сама ограничена: 

\х\<М, 

то и вместо (7) мы получаем формулу: 


В случае /(X) 


Р(|эс| > а )> Ш ТЩ т 

х 2 получаем из (8): 

Е (х 2 ) — а а 


(8) 


Р(|х| >а)> 


м 2 


(9) 


( 1 ) 


§ 4. Некоторые признаки сходимости 

Пусть 

Х 1> Х 2) • • • * • * • 

— последовательность случайных величин, и /(х) — неотрица¬ 
тельная, четная и при положительном х монотонно возрастаю¬ 
щая функция х ). Тогда справедливы следующие теоремы. 

I. Для сходимости последовательности (1) по вероятности 
достаточно следующее условие: для каждого е > 0 существует 
такое н, что для каждого р > 0 справедливо, неравенство: 

Е {/(* п+ р-*„)}<*• (2) 

II. Для сходимости по вероятности последовательности (1) 
к случайной величине х достаточно условие: 

-X)} = 0. (3) 


п 


Нт Е{/(х 


III. Если / (х) ограничена и непрерывна и / (0) 
вия I и II являются также и необходимыми. 
ІѴ.'Если /(х) непрерывна, /(0) = 0 и все 


0, то усло- 


х ь X 


2 > 


• • 


X 


п 


X 


ограничены в своей совокупности, то условия I и II являются 

также и необходимыми. 

Из II и IV следует, в частности: 

V. Для сходимости по вероятности последовательности (1) 
к X достаточным является условие 

Ііш Е(Х — х) 2 — 0. (4) 

Если при этом х ѵ х 2 ,. Х п ,X ограничены в своей 

совокупности, то это условие является и необходимым. 

Для доказательства I — IV ср. 81ій$ку [1] и РгёсЬеі [1]. Впро¬ 
чем, эти теоремы следуют почти непосредственно из формул (3) 
и (8) предшествующего параграфа. 


х ) Следовательно, / (х) > 0, если а ф 0. 








ДИФЕРЕНЦИРОВАНИЕ И ИНТЕГРИРОВАНИЕ 


53 


§ 5. Диференцирование и интегрирование математических 

ожиданий по параметру 


Пусть каждому элементарному событию ^ поставлена в соот¬ 
ветствие определенная действительная функция х(1) действитель¬ 
ного переменного I. Мы говорим, что х(і) есть случайная фун¬ 
кция, если при каждом фиксированном I величина х ( і ) является 
случайной величиной. Возникает тогда вопрос, при каких усло¬ 
виях знак математического ожидания является переместительным 
со знаками интегрирования и диференцирования. Две следующие 
теоремы могут, не исчерпывая всей проблемы, дать во многих 
простых случаях удовлетворительный ответ на этот вопрос. 

ТЕОРЕМА I. Если математическое ожидание Е [х (/)] конечно 
для любого і, х(і) всегда для любого і диференцируема и 
производная х'(/) от х(і) по I всегда по абсолютному значе¬ 
нию меньше некоторой определенной постоянной М, то 

4 Е [*(')] = Е [*'(*)]• 

ТЕОРЕМА И. Если х(і) по абсолютному значению всегда 
остается меньше некоторой постоянной К и интегрируема по 
Риману, то 

ь , ь 

/ Е[х(0] Л=е[/х(0<4 ! 

а а 


если только Е [х(0] интегрируемо в смысле Римана. 

Доказательство теоремы /. Прежде всего заметим, что х' (/) 
как предел случайных величин 

й ’ я— 1 » 2 ’ * * ‘ ’ п’"' 


является случайной величиной. Так как х'(7) ограничена, то су¬ 
ществует математическое ожидание Е [х' (/)] (свойство VII мате¬ 
матических ожиданий из § 2). Выберем теперь постоянное і и 
обозначим через А событие 


х(і + П) - х (I) 

_ ■ -■ т- — . ——— 

п 


х '(0 


> е. 


Вероятность Р(А) стремится к нулю при Л—>0 при любом 
в> 0. Так как всегда 
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и, кроме того, в случае А 


_ Х ' (0 < в> 


то 


Ех (I + Н) — Ех (I) Ех'ф + 


х'(0 = 


— Р (А) Е Л У — - - Й й— 


х '(0 + 


+ Р(Д)Е_ лі* +*>-*('> 


х'(0|<2МР (А) + в. 


е > О можно при этом выбрать произвольно, а Р (Л) сколь 
угодно мало при достаточно малом к. Следовательно, 

~Ех(і) = Нт - Е * (*+ - п ) - Ех & = Ех' (О 

ш п —*■ 0 « 7 

что и требовалось доказать. 

Доказательство теоремы II. Пусть 


к = п 


5 «=4-2 х <-*+^)> 


Ь — а 




Так как 5 П сходится к і= то можно для любого 

а ^ 

ж > 0 выбрать такое Л/, что из л > N следует неравенство: 


Р(Л) = Р{[5 п -У|> е }< е . 


Если положить 


к —п 


-і- 2 Ех (< +“> - Е5 . 


Л = 1 


то 


|5:-Е(У)|=|Е(5 п -У)|<Ё|5 п -У1 = 

= Р(А)Е а |5 п -і| + Р(Л) Е_| 5 п -У |<2КР(А)+ 

+ е < (2К + 1)в. 

Следовательно, 5* стремится к Е С/), откуда следует равенство 

ь 

^ Ех(0 йі == Пт 5* = ЕС/). 


8 
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Теорема II может быть без всяких новых затруднений обоб¬ 
щена для двойных и тройных интегралов. Мы дадим применение 
этой теоремы для одной задачи геометрической теории вероят¬ 
ностей. Пусть О — квадрируемая область на плоскости, вид 
которой зависит от случая, т. е. пусть каждому элементарному 
событию ^ из поля вероятностей поставлена в соответствие 
определенная квадрируемая область О на плоскости. Через У 
обозначим площадь, области О , а через Р (х, у) — вероятность 
того, что точка (X, у) принадлежит области О. Тогда 

Е(Л = II Р(х, у)йхйу. 

Для доказательства достаточно заметить, что 

•* = / / 1(Х, у) йх йу, 

Р(х, у) = Е/(х,у), 

где /(х, у) — характеристическая функция области 0[/(х, у) = 1 
на О и /(х, у) = 0 вне О 1 )]. 


*) Ср. А . КоІто&огоН иші М. Ье опіоіѵііаск , 2иг Вегесішип^ бег 
шіШегеп ВгодѵпзсИеп РШсНе, „РЬузік. Яеіізскг. сі. 8о\ѵ]'е1ипіоп Й , т. 4,1933. 




V. УСЛОВНЫЕ ВЕРОЯТНОСТИ И МАТЕМАТИЧЕСКИЕ ОЖИДАНИЯ 

§ 1. Условные вероятности 

В главе первой, § 6, мы определили условную вероятность 
гоК#) события В относительно испытания 21. При этом в главе 

первой было предположено, что 21 допускает лишь конечное 
число различных возможных исходов. Можно, однако, опреде¬ 
лить Р<а(б) также и для случая испытания 21 с бесконечным 
множеством возможных исходов, т. е. для разложения мно¬ 
жества Е на бесконечное число непересекающихся подмножеств 
Ь частности, такое разложение получается, если рассматривать 

произвольную функцию иот|и определять в качестве элемен- 
тов разложения 31^ множества и = сотѣ. 

Условная вероятность Ру и (в) будет обозначаться также через 

Р и (В). Любое разложение 21 множества Е можно определить 

как разложение 2І ц , которое „индуцируется'' функцией и от |, 

если каждому ! поставлено в соответствие в качестве и (!) то 
множество из разложения 31, которое содержит !. 

і определяют тогда и только тогда 
одно и то же разложение 21 ц = ЭД и множества Е, если суще¬ 
ствует такое взаимнооднозначное соответствие и х = / (и) между их 
значениями, при котором тождественно и х ($) Читатель 

может легко показать, что определяемые ниже случайные вели- 
чины Р м ( В ) и р мі (В) в этом случае совпадают; следовательно, 
в основном они определяются самим разложением 21 = 21 Для 
определения Р и (В) можно применить следующее равенство: 

^(иСА)(^)~Е{ и (1) 

. Легко показать, что в случае конечности множества Е ^ воз¬ 
можных значений и равенство (1) выполняется при любом выборе 
множества А (причем Р и (В) определяется согласно § 6 главы 
первой). В общем случае (для которого Р и (5) еще не опреде¬ 
лена) мы докажем, что всегда существует "одна и, с точностью 
до эквивалентных величин, только одна случайная величина 
Р М (Д)» определяемая как функция от и и удовлетворяющая при 
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каждом А из <5 (и) , для которого Р (г °(А)>0, уравнению (1). 
О пред в ленную таким образом с точностью до эквивалентно¬ 
сти функцию Р и (В) от и. мы называем условной вероятно¬ 
стью В относительно и (или при данном и). Значение р (В) 
при и = а мы обозначаем при этом через Р и (а; В). 
Доказательство существования и единственности Р (В) ѣ 

Умножив (1) на Р{«СА) = Р ,и) (Л), получаем слева: 

Р С р {ис а}(Я) = Р іи С Д}) = Р (Ви - 1 (А)), 

а справа: 

Р{ыСД}Е {исА} Р и (5) = у Р и (В)Р№)=/Р« (Я) Р (и) (йЕ (и) 

{и С А} А 

получаем, следовательно, формулу: 

Р (Ви- 1 (А)) = у> м (в) р {и \сІЕ (и ). (2) 

А ' 

Обратно из (2) следует формула (1). 

В случае Р ( \А) = О, при котором (I) не имеет смысла, ра¬ 
венство (2) тривиально. Требование (2), следовательно, эквива¬ 
лентно (1). По свойству IX интеграла (глава четвертая, § 1) 
случайная величина х с точностью до эквивалентности одно¬ 
значно определяется через значения интеграла 

/хр (СІЕ) 

А 

для всех множеств из <5. Так как Р и (В) — случайная величина, 

определенная на поле вероятностей (<5 (и) Р (и) ), то отсюда сле¬ 
дует, что формула (2) однозначно определяет эту величину 
Р и (В) с точностью до эквивалентности. 

Нам остается доказать существование Р^(ІЗ). Для этой цели 
мы применим следующую теорему Никодима х ): 

Пусть <5 борелевское тело множеств, Р (Л) — определенная 
на неотрицательная вполне аддитивная функция множеств 
[в теоретико-вероятностной терминологии — случайная величина 
на 05, Р)], а С} (А) — вторая определенная на ^ вполне адди¬ 
тивная функция множеств, причем из ф (А) ф 0 следует нера¬ 
венство Р (А) > 0. Тогда существует измеримая по отношению 

гг ^^ иг ипе ёёпёгаіізаііоп без іпіё^гаіез бе М. б. Кабоп. 
„Рипб. МаіЬ.% т. 15, 1930, стр. 168 (Шёогёше III). 
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к <5 функция /(I) (в теоретико-вероятностной терминологии — 
случайная величина), удовлетворяющая для каждого множества А 
из & равенству: 

<на)= /д!)р т- 

А 

Для применения этой теоремы к нашему случаю остается 

доказать: 1° что ф(Л) = Р (Ви~ 1 (Л)) вполне аддитивна на *5 (и) , 

2° что из <2(Л)фО следует неравенство: Р (и) (Л)>0. 

Прежде всего 2° следует из 


— і 


-] 


0<Р(би“ЧЛ))<Р(и (Л)) 
Для доказательства 1° полагаем 

Л = 


Р (и) (Л). 


2 


п 


Тогда 


и 1 (А) =2 и 1 ( А п ) 


П 


И 


ВиГ 1 (Л) =2 Ви-^Ап). 


П 


Так как Р вполне аддитивна, то отсюда следует, что 

Р (Ви~ 1 (А)) = ^Р{Ви~ 1 (А п )), 


П 


что и требовалось доказать. 

Из равенства (1) следует, в частности (если положить Л=/^ и) ) 
важная формула: 

Р(В)=Е(Р и (В)). (3) 

Теперь мы перейдем к доказательству двух следующих фун¬ 
даментальных свойств условных вероятностей: 

ТЕОРЕМА I. Почти наверное можно утверждать, что 

0<Р и (В)<1. (4) 

ТЕОРЕМА II. Если В разложено на суммы множеств В н 
так, что в каждой сумме не более счетного числа слагаемых 

В = 2 в т , 


п 


то почти наверное имеет место равенство: 


р„ №) = 2 р„ (В„>. 


(5) 


п 


Эти два свойства РА В) соответствуют двум характеристиче- 
ским свойствам вероятностной функции Р (В): всегда 0<Р(В)<1 
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и Р(В) вполне аддитивна. Они позволяют перенести на услов¬ 
ные вероятности Р и многие дальнейшие существенные свойства 

абсолютных вероятностей Р (В). Однако при этом не следует 
забывать, что Р«(В) при фиксированном множестве В является 

величиной, определенной лишь с точностью до эквивалентности. 

Доказательство теоремы I. Если мы предположим 
в противоположность доказываемому утверждению, — что на мно¬ 
жестве М с Р (и) (М)>° выполняется неравенство Р^ (В)> 1+г, 
е>0, то по формуле (1) 

Р { „СМ}( В ) =Е {«СМ } Р «( В ) >1 + е ’ 

что, очевидно, невозможно. Так же доказывается, что почти на¬ 
верное Р и (Я}>0. 

Доказательство теоремы II. Из сходимости ряда 

2 Е 1Р и (В п ) I = 2 Е (Р„ (В п )) = 2 Р ( в п > - Р ( в ) 

п п п 

следует по свойству V математических ожиданий (глава четвер¬ 
тая, § 2), что ряд 

2 Р п < В п) 

П 

сходится почти наверное. Так как ряд 

2^ {иСА}|Рѵ^М = “ 

=2Р | „=ѵ.і< в »)=Р(.=я І ( в) 

п 

сходится при каждом выборе множества А такого, что 

Р (и) ( А) > 0, то из упомянутого свойства V математических ожи¬ 
даний следует, что для каждого множества А указанного вида 
имеет место соотношение: 

Е {«с А}(2 Р и(ЯгД =2 Е {“ с А}(Р„(Вп)) = 

= Р{и СА}(В) — Е{и СД}(Р и (б п )) • 

а отсюда непосредственно следует равенство (5). 

В заключение этого параграфа укажем на два частных случая. 
В первом и (!)= С— постоянная, тогда почти наверное Р 0 (Л) = Р (А). 

Если положить, напротив, «(!) = !, то получим сразу, что Р^(Л) 

почти наверное равна единице на Л и нулю на А • РДЛ) является, 
следовательно, характеристической функцией множества Л. 
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§ 2. Объяснение одного парадокса Бореля 

Пусть за основное множество Е выбрано множество всех то¬ 
чек сферической поверхности. За <5 мы примем совокупность 
всех борелевских множеств сферических поверхностей. Наконец, 
пусть Р (Л) пропорциональна мере множества А. Выберем теперь 
две диаметрально противоположные точки в качестве полюсов, 
тогда каждый меридианный круг однозначно определяется соот¬ 
ветствующей географической долготой гр (0 гр < л). Так как гр 
изменяется только от 0 дол:, т. е. мы рассматриваем полные мери¬ 
дианные круги (а не полуокружности), то и широта 0 должна 

изменяться от —л до +тг ^а не от —у до + т~). Борелем 

поставлена следующая задача: определить „условное распределе¬ 
ние вероятностей* 4 для широты 0, — л*СѲ л П Р И заданной 

долготе гр. Легко подсчитать, что 

«2 

Р Ѵ (Ѳ 1 <Ѳ<Ѳ 2 ) = І-У' ІС05 ѳ\аѳ. 

01 

Распределение вероятностей для 0 при заданном гр не¬ 
равномерно. 

Если предположить, что условное распределение вероятно¬ 
стей для 0 „при гипотезе, что § лежит на меридианном круге“, 
должно быть равномерным, то получается противоречие. 

Это обстоятельство показывает, что понятие условной вероят¬ 
ности относительно изолированно заданной гипотезы, вероят¬ 
ность которой равна нулю, является недопустимым: только тогда 
мы получим на меридианном круге распределение вероятностей 
для 0, если будем рассматривать этот меридианный круг в ка¬ 
честве элемента разложения всей сферической поверхности 
на меридианные круги с заданными полюсами. 

ловные вероятности относительно случайной 

величины 

Если х — случайная величина и Р Х (В) как функция х изме¬ 
рима в смысле Бореля, то Р х (В) можно определить также 

элементарным путем. В самом: деле, формуле (2), § 1, можно 
придать следующий вид: 

р (В) Р (х) (Л) =/ р х (В) Р (к) (СІЕ). (1) 

А 

В нашем случае из (1) получается непосредственно, что 

а 

р (В) Е (х) (а) = § р х (а- В) йР {х) (а). (2) 
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Согласно одной теореме Лебега г ) из (2) следует, что 

р (а; В) = Р (В) Ига (Д + Н) ~ (д) (3) 

* н о РЮ (а + П) — РЮ [а) 1 ' 

с точностью до множества Н точек а такого, что Р (л) (Н) = 0. 
Р іх) (а; В) была Определена в § 1 лишь с точностью до множе¬ 
ства О такого, что (О) = 0. Если рассматривать теперь фор¬ 
мулу (3) как определение Р х (а;В), причем в случае несуще¬ 
ствования предела в правой части (3) положить Р (а; В) = 0. 
то эта новая величина удовлетворяет всем требованиям § 1. 
Если, кроме того, существуют плотности вероятностей } (х) (а) 

и Ів* ( а ) и если / (ЗС) ( с ) > то формула (3) превращается в 

следующую: - 


' 47 №(а) ~ 

Кроме того, из формулы (3) следует, что с} 
дела (3) и плотности вероятности / (ж) (а) имеет 
существование /| с) (а). При этом 

р (В) № (а) <1 (х) (а). 

Если Р ( В ) > 0, то из (4) следует равенство 

.(х) , ч Р*Л«; В) /< ж) ( а) 


Из (6) и (7) получаем 

/ 2 > (») = 


г ) Лебег, Интегрирование 
1934, стр. 245—246. 


и отыскание примитивных функций. 
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Это равенство дает нам так называемую теорему Байеса для 
непрерывных распределений. Предположения, при которых эта 
теорема доказана, следующие: Р Я (В) измерима в смысле Бореля 

и в точке а определена по формуле (3), распределение х непре¬ 
рывно, и в точке а существует плотность вероятности / <ж) (а) 


§ 4. Условные математические ожидания 

Пусть и — произвольная функция от <е, а у — случайная вели¬ 
чина. Случайная величина Е и (у), представимая как функция и 

и удовлетворяющая для любого множества А из <5 (и) с 
Р м {А) > 0 условию 


А) 00 С ООл (1) 

называется (в случае, если она существует) условным матема¬ 
тическим ожиданием величины у при известном значении и. 

Умножив (1) на Р (и) (Л), получаем: 

ф 

/ Р у(ав)= / Е и (у)Р {и) (дЕ (и) ). (2) 

{исА} А 


Обратно из (2) следует формула (1). В случае Р (и) (А) = 0, 
при котором (1) не имеет смысла, (2) — тривиально. Так же, 
как и в случае условных вероятностей (ср. § 1), доказывается, 
что Е и {у) однозначно — с точностью до эквивалентности — опре¬ 
деляется через (2). 

Значение Е и (у) при и = а мы обозначаем через Е и (а\ у). 
Заметим еще, что Е. и (у), также как и Р м (.у), зависит только от 
разложения ЗД и может быть обозначено через Е$г Гу). 

а и * 

При определении Е и (у) уже предположено существование 
Е (У) [если положить А = Е (и) , тогда Е {и с А} (у) = Е (у)]. Мы 


теперь докажем, что существования Е (у) также и достаточно 
для существования Е и (у). Для этого достаточно показать, что 
по теореме Никодима (ср. § 1) функция множеств 


/ урт 

{и с А} 

вполне аддитивна на и абсолютно непрерывна относительно 

Р (и) (Л). Первое обстоятельство доказывается дословно так же, 
как и в случае условных вероятностей (ср. § 1). Второе требо- 
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формула: 

Е(„ѵ) = ЕЕ и О). 

Далее доказывается, что почти наверное 


* 


где а и Ь — две произвольные постоянные. (Проведение доказа- 
тельств предоставляется читателю.) 

Если и и ѵ — две функции элементарного события % то пара 
(и, ѵ) может также рассматриваться как функция Здесь тогда 
имеет место следующее важное равенство: -ѵ. 


4^(и, ѵ ) (У) 


(5) 


В самом деле, Е и (у) определяется через соотношение: 


^{исл (у) с А }Е и (у). 

Следовательно, нужно доказать, что Е и Е (и> ѵ) (у) удовлетворяет 

равенству: 


{и с А} 


(У) 


^(«СА)^ Е(гь V) Су)' 


(6) 


Из определения Е (и ^(у) следует: 


{и с А} 


(У) 


^■{и с А} ^(и, ѵ) ( У )* 


(7) 


Из определения Е и Е (г4> ѵ) (у) следует далее, что 


и СА| ^(г*. ѵ) (У) 


^{и с А| ѵ) ОО* 


Равенство (6) является следствием равенств (7) и 
наше утверждение доказано. 

Если положить ,у=р г (#) ѵ равным единице на В 

вне В , то 

Е М СУ) = Р«(Я), 


(®> 
(8), чем 


и нулю 


^(г4, г?) (-У) 


(и, ѵ ) 


(В). 
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В этом случае из формулы (5) получается формула: 

ѵ) (В) = Р ц (В). (д) 

И НШНОСреДСТВШЧНО Р ЧереЗ Д СІХОДетСТЧВуіОСЦие Р у!оК> РРРРДРЛРаР ввкже 

ДЛИ в,о« „ели рассорив,»™ 

+оо 


■ 5 ' ( “ )_ к 2^*Ри№<У<(к + 1)4 = 2 *»• (Ю) 

В Г сташіс " "°™ “Ч.™- 


Е|/? й | — |Ы|Р {Ы<у/< (^4_ 

а сходимость ряда 

+оо 

а= ? то ,ая,Р{Ы< - ) ' < ^+ і)Д} = 2 е)/? 4 ) 

четв Я е е ^ѵю Не Гп ДИ и ЫМ уСЛОВИем существования Е(у) (ср главу 
четвертую, § 1 ). Из этой сходимости следует чтп п /п т У 

дится почти наверное (ср. главу четвертую * 2 V? Ля п } 

называем, так же как и в теории интегпяля пІ Ѵ) ' Далее Д0 ‘ 
димости (10) при каком-лийп з ег Р ала Лебега, что из схо- 

и что в случае сходимости ряда П оГі с , х ° ,|шость П Р И всяком Я 

ленному „ределу „„„ яГоГмо. ’ М СТр “" кя “ °"Р 8 *- 

ния положить ‘ но ТОІДа в порядке определе- 


^ч^ (И) 

услано' 0 о™ 6 „“е Д 'Ты ѵГ, соотношением (11) 

треОоианням, Д „,Г„о^ 1 —ГГт„:ТтГ"“" " Ре ™ 

сотласио (11) величина Е и (у) 

доказательство протекает следующим образом: '' 


л—о 


^{иса)Е м (у) 


Нт Е, 

Л-*0 {“ 


5 Я («) 


+ со 

Пт у АДР, 

Л -0 {г* 

я — — оэ 1 


{г* С < (^ + 1) А) 


^■{и С А}( Ѵ )- 


значений* я'игГа* всГ в?рТтности Т °Гш последовательное™ 

почти наверное для всех этих значений + О-Ч оп Р е Делены 
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Перестановка знаков математического ожидания и предела 
допустима при этой выкладке, так как ЩЩ сходится равно¬ 
мерно к Е и (у) при Д=>0 (простое следствие свойства V мате¬ 
матических ожиданий из § 2). Перестановка знаков математиче¬ 
ского ожидания и суммирования также оправдана, так как ряд 

2° Е {и с А} о ьх \ р и [И <у < (к + 1)Я]} = 

к — — оо ■ [ 1 

А«=з + оо 

= 2 | йХ | Р| и с < (к + 1) Я] 

к ——оо * * 

сходящийся (непосредственное применение свойства V математи¬ 
ческих ожиданий). 

Вместо (11) можно написать: 

Е и ІУ) = / уР и (<* Е У> ( 12 ) 

Е 

не следует, однако, при этом забывать, что (12) не является 
интегралом в смысле § 1 главы четвертой, так что (12)—только 
символическое обозначение. 

Если х — случайная величина, то функцию от а: и а: 

Г™ (а) = Р х (у< а) 

мы называем условной функцией распределения у при извест¬ 
ном х. Р^ (а) определена почти наверное при всяком а . Если 

а < Ь у то почти наверное 

Р ( х (а)<Р™ (6); 

из (11) и (10) следует, что почти наверное 

+ оо _ 

Е л (у) = Ііт 2 ЬЦГ™(Хк.+ 1)Х)-ГМ(Щ. (13) 

*-+°к=-со 

Это обстоятельство можно символически выразить формулой: 

4-оо 

Е * ОО = / а йР™ (а). (14) 

—СО 

С помощью нового определения математического ожидания 
(10)—(11) легко доказать, что для действительной функции от и 

В и [і(и)у] = Ни)Е и (у). 

5 Колмогоров. Основы теории вероятностей 





VI. НЕЗАВИСИМОСТЬ. ЗАКОН БОЛЬШИХ ЧИСЕЛ 

§ 1. Независимость 

Определение 1. Две функции и и ѵ от | взаимно неза¬ 
висимы, если для любых двух множеств А из <5 (и) и В из <5 (ѵ) 
справедливо следующее равенство: 

Р (иС Л, ѴС.В) = Р («С А) Р (ѵС.В) = Р (и) (А) Р (ѵ) (В). (1) 

Если множества Е (и) и Е^ состоят лишь из конечного числа 
элементов 

Е^ и) = а г + и 2 + ... + и п у 
Вѵ) =ѵ ± + ѵ 2 + ... + ѵ т , 

то наше определение независимости и и ѵ совпадает с опреде¬ 
лением независимости разложений 

^ = 2 = 

к 

^ = 2 і ѵ = ѵ кі 

) к 

согласно § 5 главы первой. 

Для независимости и и ѵ необходимо и достаточно следую¬ 
щее условие: при любом выборе множества А из почти на¬ 
верное выполнено равенство: > 

Р>СЛ)=Р(«СЛ). (2) 

В самом деле, в случае, когда Р (ѵ) (В) = 0, оба равенства (1) 
и (2) удовлетворяются, следовательно, достаточно доказать их 

эквивалентность в случае Р (г) (В)>0. В этом случае (1) экви 
валентно соотношению 

Р{„с В] (иС1А) = Р(иС1А) (3) 

и, следовательно, соотношению 

Е {ГСВ} Р Ѵ («СЛ)=Р(«СЛ). (4) 
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С другой стороны, видно, что из (2) следует равенство (4). 
Обратно, так как Р ѵ (и С А) однозначно определяется из (4) с 

точностью до вероятности гіуль, то из (4) почти наверное сле¬ 
дует равенство (2). 

Определение 2. Пусть М — множество функций и (^) 

от |. Эти функции называются взаимно независимыми в своей 
совокупности, если выполняется следующее условие. Пусть М' 
и М "—-два непересекающихся подмножества из М А' 
(соотв. А ) — множество из определяемое соотношением меж- 
ду из М' (соотв. М")\ тогда выполняется равенство: 

Р (А'А") = Р (Д') р(Д"). 

Совокупность всех и^ из М' (соотв. из М") можно рассма¬ 
тривать как координаты некоторой функции и’ (соотв. и"). 
Определение 2 требует лишь независимости и' и и" в смысле 

определения 1 при каждом выборе непересекающихся множеств 
М' и М". 

Если и 1 , и 2 , ■ • • і и п взаимно независимы, то всегда 

РКСД, « 2 Л 2 С,_, й п СД л ( = 

= Р (“і С А і ) Р («, С А 2 ) . . . Р (и п С А п ), (5) 

если только множества А ^ принадлежат соответствующим ^ и ^ 

(доказательство посредством индукции). Этого равенства, однако, 

в общем случае никоим образом не достаточно для взаимной не¬ 
зависимости и ѵ и п . 

Равенство (5) без затруднений обобщается на случай счет¬ 
ного произведения. 

Из взаимной независимости и в каждой конечной группе 

(ит д •.., вообще говоря, еще не следует, что все и вза¬ 
имно независимы. ** 

Наконец, легко заметить, что взаимная независимость функ- 
ций и ^ собственно говоря, является свойством соответствующих 

разложений Если далее и^ — однозначные функции соот¬ 

ветствующих и^у то из взаимной независимости и следует то же 
относительно и !. ^ 

/л 


§ 2. Независимые случайные величины 


Если х ІУ х 2 , х п — взаимно независимые случайные вели¬ 
чины, то из равенства (2) предыдущего параграфа следует, в 
частности, формула: 


'(Яі, #2» ■ • ■ > Хп) 


(«1, «2, • • •, а п ) = Р ы ( аі ) Р (х *\а 2 )... Р ы (а п ). (1) 
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Если при этом тело множеств <5 (лі ’ * 2 ’ * “ ’ * Хп) состоит только 

из борелевских множеств пространства /? п , то условие (1) 

является также достаточным для взаимной независимости 
величин х ѵ х я ,..., х п . 

Доказательство . Пусть л:' = (х. , лг. х.) и х" = 

/ ѵ г 1 г 2 *л/ 

—••• * — Д ве непересекающиеся подсистемы вели¬ 

чин х 1у х 2> ..., х п . На основании формулы (1) следует дока¬ 
зать, что для любых двух борелевских множеств А' и А" из 
(соотв. /? ш ) выполняется равенство: 

Р (х'СА', х" С А”) = Р (*' С А') Р (х" С А "). (2) 

Это следует непосредственно из (1) для множеств вида: 

А = < іф щ < а ѵ ..., лт іл < а А }, 

^ ^2 х і т < Ь т Ѵ 

Далее доказывается, что это свойство множеств А' и Л" 
сохраняется при обозначении сумм и разностей, откуда равен¬ 
ство (2) следует для всех борелевских множеств. 

Пусть теперь х = {х^} — произвольная (вообще бесконечная) 

совокупность случайных величин. Если тело множеств <5 (зс) 

совпадает с телом В^ м (М есть множество всех р), то 
совокупность равенств; 

...Мп (*** а 2’ • * • * а п) = Щ х ( а 1 ) ( а ъ) ( а п ) (3) 

необходима и достаточна для взаимной независимости 
величин х^ 

Необходимость этого условия следует непосредственно из 
формулы (1). Мы теперь докажем, что оно также и достаточно. 
Пусть М' и М" — два непересекающихся подмножества из мно¬ 
жества М всех индексов /г, А ' (соотв. А п ) — множество из 

определённое соотношением между х^ с индексами р 

из Ж' (соотв. из М"); следует доказать, что тогда выполнено 
равенство: 

Р(А'А") = Р(А')Р(А"). (4) 

Действительно, если А ' и А н — цилиндрические множества, то 
мы имеем дело с соотношениями между конечным числом вели¬ 
чин х^ равенство (4) представляет в этом случае простое след¬ 
ствие предшествующих результатов [(формула (2)]. А так как соот¬ 
ношение (4) сохраняется для сумм и разностей множеств А ' 

(соотв. А п ), то (4) доказано также для всех множеств из В^ м . 
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Пусть теперь для каждого р из множества М задана а ргіогі 
функция распределения /^(а); можно тогда построить такое 

поле вероятностей , что в нем заданные случайные величины 
Х и будут взаимно независимы , причем х^ будет иметь в ка¬ 
честве функции распределения а ргіогі данную функцию Р {а ). 

Для того чтобы это доказать, достаточно принять /? м за основ¬ 
ное множество Е и В& м за тело а функции распреде¬ 
ления (ср. главу третью, § 4) определить через 

равенство (3). 

Заметим еще, что, как было видно выше, из взаимной неза¬ 
висимости всякой конечной группы величин д: [равенство (3)] сле¬ 
дует взаимная независимость всех Х: на В объемлющих по¬ 

лях вероятностей это свойство может утеряться. 

В заключение этого параграфа дадим еще некоторые признаки 
независимости для двух случайных величин. 

Если две случайные величины х и у взаимно независимы и 
если Е ( х ), и Е (у), конечны, то почти наверное 


Е х (у) = Е (у), | 
ЕуС*) = Е(х). ) 


Эти формулы представляют непосредственное следствие вто- 

рого определения условных математических ожиданий [формулы 

(10) и (11) § 4 пятой главы]. Следовательно, в случае незави¬ 
симости обе величины / 


,2 _ Е[ У- Е * 001 2 ^ . Е[Х - Еу (*)]■ 

о 2 (У) ’ ё ст 2 (х) 

равны нулю, [если только а 2 (х) > 0 и а 2 (у) > 0]. Число / 2 
называется корреляционным отношением у по х, ^ — то же 
для х по у (Пирсон). 

Из (5) далее следует, что 


Е (ху) = Е(х) Е Су). (6) 

Для доказательства применяется формула (15) из § 4 пятой главы 


Е (ху) = ЕЕ Х (ху) = Е[хЕ х (у)] = Е (х Е (у)] = Е (х) Е (у). 

Следовательно, в случае независимости 

г _ Е (ху) - Е (х) Е ( у ) 

а (х) а (у) 


также равно нулю; г, как известно, — коэфициент корреляции 
между х и у. 
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Если две случайные величины х и у удовлетворяют равен- 
ству (6), то они называются некоррелированными . Для суммы х 

3 = х х +х 2 + ... + х п 

попарно некоррелированных величин х ѵ х 2 ,..., лг п легко сосчи¬ 
тать, что п 

° 2 О 8 ) = а2 ( х і) + * 2 (лг 2 ) + ... + о 2 (х п ). (7) 

В частности, равенство (7) справедливо для независимых 
величин х и . 

§ 3. Закон больших чисел 
Случайные величины 5 последовательности 


5 і» • • • 9 $ п ч • • • 

называются стабильными, если существует такая числовая после¬ 
довательность 

^2 > • • •» й п , .. ., 

что для любого положительного 5 

Р 0 З п — а п\> е ) 

стремится к нулю при п -> оо. Если существуют все Е ($ ) й 
если можно положить 

а п = Е (з п ), 

то стабильность нормальная. 

Если все $ п равномерно ограничены, то из 


р {| 5 „ — 

п 

(1) 

следует соотношение: 



\Е(з п )-а п \^о 

пСО 9 


и, следовательно, 



Р(К-Е(5 п )|> е }^0 

п —> оо # 

(2) 


Стабильность ограниченной стабильной последовательности 
необходимо нормальна. Пусть 




По неравенству Чебышева 
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Следовательно, условие Маркова 

«г 2 =* 0 (3) 

п 

достаточно для нормальной стабильности. 

Если 5 — Е($ п ) равномерно ограниченны: 

то по неравенству (9) из § 3 четвертой главы 

Следовательно, в этом случае условие Маркова (3) является 
также и необходимым для стабильности х п . 

Если 

*1 + *2 + --- + Х П 



и величины х п попарно некоррелированы, то имеем: 

2^ < = Ь I ° 2 ^ + ° 2 ( Х2) + --- + ° 2 Ю1- 

Следовательно, в этом случае для стабильности 5 редних ариф¬ 
метических 5 достаточно условие: 

тс» 

«Ч = 2 2 = 02 (*і) + 02 (<*0 + • • • + <* а (*») = 0 (« 2 ) ( 4 ) 

п " 

(теорема Чебышева). В частности, условие (4) выполнено, если 
все величины х п равномерно ограниченны. 

Можно обобщить эту теорему на случай слабо коррелирован¬ 
ных величин х п . Если предположить, что коэфициент корреля- 
ции г !) между х т и лг п удовлетворяет неравенству: 

г <с()/я — п I) \ 

тп ' 7 

и что 

с п = 2 1 с (*). 

к—О 

то для нормальной стабильности средних арифметических доста¬ 
точно условие 2 ): 

С. 2 ’ =»<"“)• (5 > 


2 ) Ясно, что всегда Г ПП _ _ 

2 ) Ср. А. Ккіпіскіпе, 5иг Іа Іоі іогіе йез §гапйез потЬгез, „С. К. 
йе Гасай. зсі. Рагіз", т. 186, 1928, стр. 285. 
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В случае независимых слагаемых х п можно дать также необ¬ 
ходимое и достаточное условие для стабильности средних ариф¬ 
метических 8 п . Для каждого х п существует константа т п (ме¬ 
диана лг п ), удовлетворяющая следующим условиям: 

Р І. 


Мы полагем 


р<ѵ> *„><!• 


пк 


Х к , если \х к — т к \<п, 
О в противном случае, 

х г)і + х т + • * • + х пп 


Тогда соотношения 


2 Р{к А — т к \>п}= 2 Р (^п* Ф-^к) “♦ 0 л - >со * ( 6 ) 

А=1 к=1 

^ 

2 * 2 = 2 02 ( х „ к ) = о (я 2 ) (7) 

А --1 

необходимы и достаточны для стабильности величин 5 п 1 ). 

Можно при этом принять постоянные й п равными величинам 
Е($*), так что в случае 

Е ($*) — Е ($ п ) о п -> оо 

(и только в этом случае) стабильность нормальная . 

Дальнейшее обобщение теоремы Чебышева получается, если 
предположить, что 8 п каким-нибудь образом зависят от исходов 
каких-либо п испытаний 

<21 9Г 

так что после каждого определенного исхода всех этих п испы¬ 
таний 8 п принимает определенное значение. Общая идея всех 

теорем, известных под названием закона больших чисел , состоит 
в том, что, если зависимость величины 8 п от каждого отдель¬ 
ного испытания (/с = 1, 2, ... , п) очень мала при большом п, 
то величины стабильны. Если рассматривать 

Кк = ЕІЕ%%...ъ к (О — <а 2 ... я (5 п )] а 


*) Ср. А. Коіто^огоѵ , ОЬег сііе Зиштеп сіигсіі сіеп 2иІа11 Ъе- 
зііттіег ипаЬЬМп^ег Огоззеп, „МаШ. Апп.“ т. 99, 1928, стр. 309—319, 
(исправления и замечания к этой работе, т. 102, 1929, стр. 484 — 488), 
теорема VIII и добавление к ней на стр. 318. 
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как разумную меру зависимости величины 8 п от испытания то 

вышеупомянутая общая идея закона больших чисел может быть 
конкретизирована следующими рассуждениями 1 ). 

Пусть 


г пк = Е 21 х 21 2 ... 21, ( 5 „) 


Е *і 21 2 ... 21^ (у- 


Тогда 


п 


Е ($ п ) — 2 Х + # 2 + ... + % п , 


Е ( г пк) ЕЕ 21 Х % ... ( 5 п) ЕЕ 21 1 21 2 ^.. 21 А _ Х (5 п) “ 

= Е(5 п )-Е( 5 п ) = 0, 

а ( Х п0 ~ Е ( Х пк) ~ Рпк- 

Легко далее подсчитать, что случайные величины г пк {к = 

= 1, 2,..., п) некоррелированы. В самом деле, пусть і<к> 
тогда 2 ) 


Еі 21 1 21 2 . . . ( г щ г пк) - г пі Е 01 1 ... 51 й _/ 2 пй) 

( 5 „)~ Е 


г т Е 21 х 21 2 ... %_ 1 ^ Е 21 х % ... 21 к 


21 х 21 2 ... 21 А _і 


( 5 п)] 


г т і Е 2і х 21 2 ... 2 І й _! ^ Е 21 х 31 2 ... «Л(О] ~ °» 


и, следовательно, 


Итак, мы имеем: 


^ (*пі г пъ) 


( 5 п) = + •.. + о\г пп )=р\+р\ + 


•. “Ь 

• ' пи 


Следовательно, условие 


+ •■. + /? 


2 

пп 


о 


П 


оо 


достаточно для нормальной стабильности величин 8 п . 


§ 4. Замечания к понятию математического ожидания 
Мы определили математическое ожидание величины х как 

Е(х) = ^хР {йЕ)= Г а с1Р (х) (а). 

Е -оо 


*) Ср. А. КоІто&огоН> 8иг Іа ІоІ сіез §гаш!е$ пошЬгее, „Кепсі. Ассасі 
Ьіпсеі", т. 9, 1929, стр. 470—474. 

*) Применение формулы (15) § 4 пятой главы. 
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При этом интеграл в правой части понимается в смысле 

+00 с 

Е ( Х ) = I а ар(Х) (й) = 1іт / а йр(Х) (°) СІІ + З (1) 

—со ь ' 

Напрашивается мысль о том, чтобы рассматривать выражение 

+ь 

Е*(х)= Ііш Г айР (х) (а) (2) 

Ъ со *[ .% 

—о 

в качестве обобщенного математического ожидания. При этом, 
конечно, теряются некоторые простые свойства математических 
ожиданий. Например, в этом случае формула 

Е(х + у ) = Е(х)+ Е(у) 

не всегда верна. Однако следует заметить, что при некоторых 
ограничивающих предположениях определение (2) является вполне 
естественным и пригодным. 

Именно можно поставить вопрос следующим образом. Пусть 


X 


2 » 


• • • 


X 


п 


— последовательность взаимно независимых величин, имеющих 

ту же функцию распределения Р (х) (а) = Р ы (а) (п= 1,2,...), 
что и х. Пусть далее 



х і + х 2 + • • • + х п 


Спрашивается, существует ли постоянная Е*(х) такая, что при 
каждом а > О 

- Ііш Р(|$ п — Е* (X)] > е) == 0. (3) 


П —* + со 


Ответ гласит: если такая постоянная Е*(х) существует , то 
юна выражается формулой (2). Необходимое и достаточное 
условие для справедливости формулы (3) заключается в суще¬ 
ствовании предела (2) и соотношении 


Р(|х|>в) = 0 (А). 



Для доказательства применяется теорема о том, что условие 
(4) необходимо и достаточно для стабильности средних арифме¬ 
тических $ п , причем в случае стабильности можно положить 

+п 

а п = /а ( 1 Р (Х) (я)!). 

—п 


г ) Ср. А. Коіто^ого//, Вешегкип^еп ги теіпег АгЬеіІ „ОЬег Фе 
Зиттеп гиШІі^егОгбззеп*, „МаШет. Апп.“, т. 102, 1929, стр. 484—488, 
теорема XII. 
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Еслисуществует математическое ожидание в прежнем смысле 
[формула (1)], то условие (4) всегда выполнено *). 

Так как в этом случае Е(х) = Е*(х), то условие (3) действи¬ 
тельно определяет обобщение понятия математического ожида¬ 
ния. Для обобщенного математического ожидания сохраняются 
свойства I — VII (глава четвертая, § 2), однако в общем случае 
из существования Е*(х) не следует существование Е*|х|. 

Для того чтобы доказать, что новое понятие математического 
ожидания является действительно более общим, чем предыдущее 
достаточно следующего примера. Полагаем плотность вероят 

ности / (зс) (а) равной 

Л / л ^ С 

1 (а) ~ (|а| + 2)Чп(|а|+2) * 

причем постоянная С определяется из условия: 

+оо 

У* І м (а)(1а = 1 . 

—оо 

Легко далее подсчитать, что в этом случае выполнено условие (4). 
Формула (2) дает значение 

Е* (х) = О, 

однако интеграл 

+оо +°° 

/| а I йР (х) (а) = /| а I / (х) (а) йа 

—со —оо 

расходится. 

§ 5. Усиленный закон больших чисел, сходимость рядов 

Случайные величины $ п последовательности 

5 і> 5 2> • • • » 9 * • • 

усиленно стабильны , если существует такая числовая последо¬ 
вательность чисел 

б*, б ѵ ... , б п , ... , 

что случайные величины 



і) Ср. А. КоІто§ого// у Вешегкип^еп хи теіпег АгЬеіі „ОЬег сііе 
8ишшеп гиШИ^ег Огбззеп, „МаШеш. Апп.“, т. 102, 1929, стр. 484—488, 
теорема XII. 
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почти наверное стремятся к нулю при п 
стабильности следует, очевидно, обычная 
можно выбрать 

- Е (О, 

то усиленная стабильность нормальна . 

В случае Чебышева 

х і + Х 2 Н" • • • + х п 


>оо. Из усиленной 
стабильность. Если 


причем величины х п взаимно независимы. Для усиленной нор¬ 
мальной стабильности средних арифметических $ п достаточна 
сходимость ряда 




(і) 


п =1 


Это условие является наилучшим в том смысле, что для любого 
ряда постоянных Ь п таких, что 

°° и 

2 7 = + ю і 

п=1 

можно построить такой ряд взаимно независимых случайных 
величин х п у что 

° 2 Ю - *„> 

а соответствующие средние арифметические $ п не будут уси¬ 
ленно стабильны. 

Если все х п имеют одну и ту же функцию распределения 
Р {х) (а), то существование математического ожидания 

+оо 


Е(х) = / а йР (х) (а) 


“СО 


необходимо и достаточно для усиленной стабильности 5 п ; ста 

бильность в этом случае всегда нормальна 2 ). 

Пусть теперь опять 

х 1У х 2 , ... , х п , ... 

—* любые взаимно независимые случайные величины. 

*) Ср. А. КоІто§ого //, 5иг Іа Іоі Іогіе сіез ^гапсіез потЬгез, я С. Н 
Асад. Зсі. Рагіз", т. 191, 1930, стр. 910—911. 

% ) Доказательство этого предложения еще не опубликовано. 
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Тогда вероятность сходимости ряда 


равна либо единице, либо нулю. В частности, эта вероятность 
равна единице, когда оба ряда 


сходятся. Пусть далее положено 


I *« в сл У чае К I < 1 . 

( 0 в случае | Х п | > 1. 


Тогда для сходимости ряда (1) с вероятностью единица необхо¬ 
дима и достаточна одновременная сходимость рядов 1 ): 


ОО 


2 ріі х „і> і). 


2 е оо и 


71=1 


ОО 


2 а2 0„)- 


г ) Ср. А. ЮііпІсНіпе шні А. Коіто^ого//, ОЬег Копѵег^епг ѵоп 
КеШеп, Математический сборник' 4 , т. 32, 1925, стр. 668—677. 

— ■" • •- • * А 



ДОПОЛНЕНИЕ 

ОДНА ЗАМЕЧАТЕЛЬНАЯ ТЕОРЕМА ТЕОРИИ ВЕРОЯТНОСТЕЙ 

Наблюдались уже многие случаи, в которых известные пре¬ 
дельные вероятности с необходимостью равны нулю или единице. 
Например, вероятность сходимости ряда независимых случайных 
величин может принимать только эти два значения 2 ). Мы дока¬ 
жем теперь общую теорему, обнимающую много таких случаев. 

ТЕОРЕМА. Пусть х ѵ х 2 , ... , х п , ... — какие-либо случай¬ 
ные величины, а / (х 1? х 2 , ... , х п , ...) — бэровская функция 2 ) 
переменных (х ѵ х 2 , ... , х п , ...) такая, что условная вероятность 


Р 


Хі Х2 ... Хп 


{/(*)- 0 } 


соотношения 


/ (*і> • 5 • • • ) ^ 


при известных п первых величинах х ѵ х 2 , ... 
равной абсолютной вероятности 


Р{/(х) = 0} 


х„ остается 

п 



для каждого п. При этих условиях вероятность (1) равна нулю 
или единице. 

В частности, предпосылки этой теоремы выполняются, если 
все величины Х п взаимно независимы и значение функции /(х) 

остается неизменным при изменении лишь конечного числа 
величин х . 

п 

Доказательство теоремы. Обозначим через А событие 


/(*) = 0 . 


*) Ср. главу шестую, § 5. То же имеет место и для вероятности 

р 

в усиленном законе больших чисел, по крайней мере, когда вели¬ 
чины х п взаимно независимы. 

*) При этом под бэровской функцией понимается функция, которая 
может быть представлена, исходя из полиномов, через последовательные 
итерированные предельные переходы. 
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Наряду с этим событием мы рассмотрим тело ^ всех событий, 
которые могут быть определены через какие-либо соотношения 
между конечным числом величин х , Если событие В принадле¬ 
жит то по условиям теоремы 

1 Р В (Л)=Р(Л). (2) 

В случае Р (Л) = 0 наша теорема уже доказана. Пусть теперь 
Р(Д)>0. Тогда из (2) следует формула: 



Р в (А) Р (В) 
Р(Л) 



р (В). 



Итак, Р (В) и Р А (В) — две вполне аддитивные функции мно¬ 
жеств, совпадающие на следовательно, они должны оста¬ 
ваться равными друг другу на каждом множестве борелевского 
расширения Вй тела 5?. Поэтому в частности 


Р(Д) = Р А (Д)=1, 


чем наша теорема доказана. 

Некоторые другие случаи, в которых можно утверждать об 
известных вероятностях, что они принимают только значения 
нуль и единица, были открыты Р. Ьеѵу. Ср. по этому поводу 
Р. Ьёѵу. 8иг ип іЬёогёше бе М. КЬіпісЫпе („Виіі. без Зсі. 
таШ. м , т. 55, 1931, стр. 145—160, теорема И). 
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